Hadoop誕生から10年--変わり続けるビッグデータ業界

Andrew Brust (Special to ZDNet.com) 翻訳校正: 石橋啓一郎 2016年02月04日 06時30分

  • このエントリーをはてなブックマークに追加

 信じられないようだが、これは本当のことだ。「Google File System」と「MapReduce」のオープンソースによる実装から始まった「Apache Hadoop」プロジェクトが1月最終週、誕生から10年を迎えた。

 この技術は元々、さらに古いウェブクローリングのためのオープンソースプロジェクトである「Apatch Nutch」の一部であり、開発を加速するために、2006年に米Yahooの開発チームの1つが割り当てられた際に独立したプロジェクトとなった。

変化を巻き起こしたHadoop

 この2つのプロジェクト(および「Apache Lucene」)の設立者であるDoug Cutting氏(元米Yahoo所属、現在はClouderaのチーフアーキテクトを務める)は、息子のゾウのぬいぐるみから名付けられたHadoopプロジェクトの生誕10年を記念するブログ記事を公開した。

 同氏はこの記事で、「従来のエンタープライズ向けリレーショナルデータベースシステムは現在、競争に直面しており、その相手はオープンソースのビッグデータ関連ソフトウェアだ」と指摘している。データベース業界はそれまで、10年以上停滞した状態だった。Hadoopと「NoSQL」がその状況を変えると、旧来のデータベースベンダーは、重い腰を上げて製品に新機能を追加し、再び活発に活動を始めた。

目を覚ました眠れる巨人

 「Microsoft SQL Server」は分析クエリを扱えるよう、列ストアインデックスをサポートするようになり、次のSQL Server 2016では、Hadoop内のデータに対しても使用可能な統合クエリ機能であるPolyBaseが追加される。一方、OracleとIBMも、それぞれHadoopに対するブリッジ機能や、半構造化データを処理しやすくする機能を追加している。

 TeradataはHadoopやビッグデータに向かって大きく舵を切り、Aster Dataの買収を行ったり、ClouderaやHortonworksとの多面的なパートナーシップを進めたりしている。またTeradataに敬意を表してか、Hadoopの時代に入ってから、主要なベンダーはデータウェアハウス専業の企業を1社は買収している。

次世代テクノロジ

 さらにCutting氏は、Hadoopが元々持っていたコアコンポーネントは、競争に直面したり、別のもので取って代わられたりしていると指摘し、「『Apache Spark』のような新しい実行エンジンや、『Apache Kudu』(インキュベーション中)のような新たなストレージシステムの存在は、このソフトウェアエコシステムが急速に進化しており、全体をコントロールする中心が存在しないことを物語っている」と述べている。ただし、これらのプロジェクトがどちらもClouderaの強力な支援を受けていることを考えれば、この指摘は割り引いて捉えた方がいいだろう。

 とはいえ、同氏の「全体をコントロールする中心が存在しない」というコメントは、よく考えてみる価値がある。この指摘は正しいが、必ずしもよいこととは限らないからだ。「創造的破壊」という言葉は、時には矛盾を伴う。ビッグデータ業界のテクノロジの新陳代謝が早すぎることで、この業界の安定性は損なわれている。

ZDNet Japan 記事を毎朝メールでまとめ読み(登録無料)

  • このエントリーをはてなブックマークに追加

この記事を読んだ方に

連載

CIO
ITアナリストが知る日本企業の「ITの盲点」
シェアリングエコノミーの衝撃
デジタル“失敗学”
コンサルティング現場のカラクリ
Rethink Internet:インターネット再考
インシデントをもたらすヒューマンエラー
トランザクションの今昔物語
エリック松永のデジタルIQ道場
研究現場から見たAI
Fintechの正体
米ZDNet編集長Larryの独り言
大木豊成「仕事で使うアップルのトリセツ」
山本雅史「ハードから読み解くITトレンド放談」
田中克己「展望2020年のIT企業」
松岡功「一言もの申す」
松岡功「今週の明言」
内山悟志「IT部門はどこに向かうのか」
林 雅之「デジタル未来からの手紙」
谷川耕一「エンプラITならこれは知っとけ」
大河原克行「エンプラ徒然」
内製化とユーザー体験の関係
「プロジェクトマネジメント」の解き方
ITは「ひみつ道具」の夢を見る
セキュリティ
エンドポイントセキュリティの4つの「基礎」
企業セキュリティの歩き方
サイバーセキュリティ未来考
ネットワークセキュリティの要諦
セキュリティの論点
スペシャル
エンタープライズAIの隆盛
インシュアテックで変わる保険業界
顧客は勝手に育たない--MAツール導入の心得
「ひとり情シス」の本当のところ
ざっくり解決!SNS担当者お悩み相談室
生産性向上に効くビジネスITツール最前線
ざっくりわかるSNSマーケティング入門
課題解決のためのUI/UX
誰もが開発者になる時代 ~業務システム開発の現場を行く~
「Windows 10」法人導入の手引き
ソフトウェア開発パラダイムの進化
エンタープライズトレンド
10の事情
座談会@ZDNet
Dr.津田のクラウドトップガン対談
Gartner Symposium
IBM World of Watson
de:code
Sapphire Now
VMworld
Microsoft WPC
Microsoft Connect()
HPE Discover
Oracle OpenWorld
Dell Technologies World
AWS re:Invent
AWS Summit
PTC LiveWorx
吉田行男「より賢く活用するためのOSS最新動向」
古賀政純「Dockerがもたらすビジネス変革」
中国ビジネス四方山話
ベトナムでビジネス
日本株展望
企業決算
このサイトでは、利用状況の把握や広告配信などのために、Cookieなどを使用してアクセスデータを取得・利用しています。 これ以降ページを遷移した場合、Cookieなどの設定や使用に同意したことになります。
Cookieなどの設定や使用の詳細、オプトアウトについては詳細をご覧ください。
[ 閉じる ]