編集部からのお知らせ
Pick up! ローコード開発の行方
「これからの企業IT」の記事はこちら

テクノロジとプレーヤーが出揃った!北瀬公彦の「Hadoop Summit 2016」レポート

文:北瀬公彦 構成:羽野三千世(編集部)

2016-07-11 07:00

 こんにちは、北瀬公彦です。6月28~30日の3日間、「Hadoop Summit 2016 San Jose」が米San Joseのサンノゼマッケンナリー会議センターで開催されました。Hadoop Summitは歴史のあるイベントで、San Joseでの開催はこれで9回目です。今回は私も含めて、初参加の人が多かったようですが、皆勤賞というツワモノも何人かいました。年々参加者が増えており、今年はおよそ4000人が参加したようです。

 Hadoop Summitというブランドが付いていますが、セッション内容は、クラウド、機械学習、ストリーミング処理、NoSQLなど多岐にわたっていました。初日の基調講演は、最初にHortonworksのプレジデントであるHerb Cunitzが挨拶し、その後のMCを務めるという形で進行しました。

キーワードは「Connected Data Platform」と「Modern Data Application」

 基調講演でHortonworksのCEO、Rob Beardenは、今後あらゆるビジネスにおいてデータが重要であり、「Data at Rest」(保存されたデータ)と「Data in Motion」(流れているデータ)をシームレスに利活用する基盤が「Connected Data Platform」であると説明しました。そして、このConnected Data Platformが「Modern Data Applications」には重要だと強調しました。

 今回のSummitは、Connected Data PlatformとModern Data Applicationの2つのキーワードについて、事例、テクノロジ、エコシステムの観点から説明するという構成が取られていたようです。

 “Data at Rest”とは、アーカイブ目的などで従来からあるようなRDMS、Hadoopクラスタに保存されるデータを指し、主にバッチ処理でデータを利用します。一方、“Data in Motion”とは、すぐに移動できて使用可能な状態にあるデータを指し、リアルタイム処理でデータを利用します。この2つのタイプのデータをいかにうまく利活用するかが、これからのアプリケーションやサービスにとって重要になります。また、この2つのデータは、クラウドとオンプレミスで収集、蓄積、分析されるので、クラウドとオンプレミスのプラットフォームをまたいだシームレスな環境も必要になるでしょう。


Hortonworks CEOのRob Bearden

Microsoftの存在感がすごかった!

 今回のSummitを通じて印象深かったのは、クラウド関連のセッションが多かったことです。その中でも特にMicrosoftのプレゼンスが非常に高かった。「Microsoft Azure HDInsight」は、HortonworksのHadoop/Sparkディストリビューション「Hortonworks Data Platform(HDP)」ベースになっているので当然そうなると思いますが、それにしてもかなりの露出でした。

 初日の基調講演では、MicrosoftのCorporate Vice President of the Data group、Joseph Sirosh氏が、事例とシナリオ例を交えながらHDInsightをはじめとしたMicrosoftのビッグデータソリューションを説明していました。若干R Server推しだったような気がします。

 さらに、MicrosoftのHDInsight Group Manager、Asad Khan氏が、全米の飛行場における飛行機の発着データを、Jupyterで分析するデモを交えながらHDInsightを紹介しました。Hortonworks的には、HDP 2.5で追加予定の「Apache Zeppelin」を推しているのか、一緒に登壇していたHortonowkrsのArun Murthyの表情は少し微妙な感じでした(笑)

 JupyterやZeppelinは、データサイエンティストがよく利用するPython、Scala、Rのような言語をインタラクティブに実行できるウェブベースのIDEのようなソフトウェアです。今回のSummitでは、Zeppelin関連のセッションがたくさんありました。


MicrosoftのCorporate Vice President of the Data group、Joseph Sirosh氏

 Microsoftだけではありません。2日目のジェネラルセッションでは、GoogleのProduct ManagerであるJames Malone氏から、2016年初めにリリースしたHadoop/Sparkのマネージドサービス「Google Cloud Dataproc」を使って、ビッグデータをどれだけ高いパフォーマンスで処理できるかのデモンストレーションがありました。今年に入り、AWS、Microsoft、Google、IBMと、大手クラウド事業者によるHadoop/Sparkのマネージドサービスが出揃ったなという感じです。


Google Product Manager James Malone氏

 また、3日目のジェネラルセッションでは、Hortonworks Senior Director of EngineeringのRam Venkateshが、AWS上にETL Cluster、Analytics Cluster、BI Clusterといったさまざまなクラスタを簡単にプロビジョニングするデモを披露し、Hortonworks Cloudのテックプレビューを紹介しました。これについて3日目の夕方にあったCloud/AutomationのBOFに参加して話を聞いたのですが、このHortonworks CloudはCloudbreak(AWSやOpenStack環境にHadoopクラスタをプロビジョニングするオーケストレーションソフトウェア)を利用しているとのことでした。


Hortonworks Cloudで、AWS上にさまざまなHadoopクラスタをプロビジョニング

ZDNet Japan 記事を毎朝メールでまとめ読み(登録無料)

特集

CIO

モバイル

セキュリティ

スペシャル

ホワイトペーパー

新着

ランキング

  1. クラウドコンピューティング

    社員の生産性を約2倍まで向上、注目の企業事例から学ぶDX成功のポイント

  2. コミュニケーション

    真の顧客理解でCX向上を実現、いまさら聞けない「データドリブンマーケティング」入門

  3. クラウドコンピューティング

    家庭向けIoT製品の普及とともに拡大するセキュリティとプライバシー問題─解決策を知ろう

  4. クラウドコンピューティング

    クラウドの障害対策を徹底解説!4つの方法とメリット、デメリット

  5. セキュリティ

    サイバー犯罪の標的となるMicrosoft製品、2019年に悪用された脆弱性リストからの考察

NEWSLETTERS

エンタープライズ・コンピューティングの最前線を配信

ZDNet Japanは、CIOとITマネージャーを対象に、ビジネス課題の解決とITを活用した新たな価値創造を支援します。
ITビジネス全般については、CNET Japanをご覧ください。

このサイトでは、利用状況の把握や広告配信などのために、Cookieなどを使用してアクセスデータを取得・利用しています。 これ以降ページを遷移した場合、Cookieなどの設定や使用に同意したことになります。
Cookieなどの設定や使用の詳細、オプトアウトについては詳細をご覧ください。
[ 閉じる ]