ビッグデータはなぜ分かりづらいのか--肥大化のメカニズム

Ken Hess (Special to ZDNET.com) 翻訳校正: 村上雅章 野崎裕子

2013-07-05 07:30

 ビッグデータについて耳にする機会は多いものの、それが持つ本当の意味を理解している人はいるのだろうか?簡単な答えは「イエス」であるが、その数はそう多くない。では、ビッグデータの理解を難しくしている原因は、一体何なのだろうか?

 ビッグデータの理解が難しいのはひとえに、われわれテクノロジ関係者らがビッグデータや、その管理について準備できていなかったためである。「いや準備はできていた」という反論が返ってくるかもしれない。しかし、実際には準備できていなかったのだ。その理由は次の通りである。世界中のデータのうち90%は、過去2年の間に作り出されたものだと言われている(注1)。このような、想像を超えるデータの増加が準備不足となった理由である。ソーシャルメディアサイトや、工業分野で使用されているセンサ類、人工衛星、携帯電話、写真、ドキュメントといったさまざまなソースから毎日、大量の新規データが生み出されている。毎日250京(2,500,000,000,000,000,000) バイト、すなわち20億(2,328,306,436.5)Gバイト以上のデータが増えているのである。こういったデータは(一時的にせよ)どこかに保管した後、データベースや分析用アプリケーションに送り込む必要がある。しかし、あまりにも多くのデータがどんどん積み上がっていくため、そのストレージや管理、分析に圧倒されてしまうわけである。ビッグデータを本当に理解している人がほとんどいないという理由は、ここにある。

 このような大量データの存在ゆえに、ビッグデータの話がそこかしこで聞かれるうえ、その理解も難しくなるのである。筆者が過去の記事で述べているように、今までを振り返ってみた場合、データは相対的に見て格納や取得、分析、整理、アーカイブ化、削除を行うには大きすぎるのが常であったが今では、もはや企業として一貫した管理ができない状況になっている。

 われわれは、これらのデータがどのようにして作り出されるのかを知っている。また大抵の場合、なぜそのようなデータを作り出しているのかも知っている。しかし、そうした大量のデータの取り扱い方法を知らないのだ。

 実際のところ、われわれはビッグデータによって生み出されるメタデータの取り扱い方法すら分かっていないのである。

 少し脱線するが、最近のニュースで米国家安全保障局(NSA)が捕捉、分析した個人情報に関連するメタデータの話をよく耳にしているかもしれない。メタデータとはデータに関するデータのことである。これは奇妙な概念に思えるかもしれないが、簡単に言えばメタデータはデータを説明する情報である。つまり、あなたも知らず知らずのうちに、メタデータを毎日使用しているわけだ。例えば、デジタルカメラで撮影した写真のメタデータは、サイズや日付け、場所、寸法、ピクセルといったものとなる。

 その他のメタデータとして、以下のようなものもある。

  • データの作成手段
  • データの目的
  • 作成日時
  • データの作成者や著者
  • データが作成されたコンピュータネットワークのロケーション
  • データの作成時に使用された規約

 「Windows」を使っている場合、写真のメタデータを確認するには写真ファイルを右クリックし、[プロパティ]を選択した後、[詳細]タブを選択するだけだ。

ZDNET Japan 記事を毎朝メールでまとめ読み(登録無料)

ホワイトペーパー

新着

ランキング

  1. ビジネスアプリケーション

    生成 AI 「Gemini」活用メリット、職種別・役職別のプロンプトも一挙に紹介

  2. セキュリティ

    まずは“交渉術”を磨くこと!情報セキュリティ担当者の使命を果たすための必須事項とは

  3. セキュリティ

    迫るISMS新規格への移行期限--ISO/IEC27001改訂の意味と求められる対応策とは

  4. セキュリティ

    マンガで分かる「クラウド型WAF」の特徴と仕組み、有効活用するポイントも解説

  5. ビジネスアプリケーション

    急速に進むIT運用におけるAI・生成AIの活用--実態調査から見るユーザー企業の課題と将来展望

ZDNET Japan クイックポール

所属する組織のデータ活用状況はどの段階にありますか?

NEWSLETTERS

エンタープライズコンピューティングの最前線を配信

ZDNET Japanは、CIOとITマネージャーを対象に、ビジネス課題の解決とITを活用した新たな価値創造を支援します。
ITビジネス全般については、CNET Japanをご覧ください。

このサイトでは、利用状況の把握や広告配信などのために、Cookieなどを使用してアクセスデータを取得・利用しています。 これ以降ページを遷移した場合、Cookieなどの設定や使用に同意したことになります。
Cookieなどの設定や使用の詳細、オプトアウトについては詳細をご覧ください。
[ 閉じる ]