IBM、「Apach Spark」向け開発環境を発表--Couchbase、Snowflakeもコネクタ製品を発表

Andrew Brust (Special to ZDNet.com) 翻訳校正: 編集部 2016年06月08日 10時48分

  • このエントリーをはてなブックマークに追加

 サンフランシスコで米国時間6月6日から3日間にわたって開催されている「Spark Summit」が2日目に入った。初日に報道したとおり、MapRとMicrosoftは既に、このイベントにタイミングを合わせ、Sparkディストリビューション関連の発表を行っている。2日目はIBMの番だ。同社は新たなSpark開発環境「Data Science Experience」を発表した。また本記事では、CouchbaseとSnowflake Computingがそれぞれ初日に発表したSparkコネクタについても紹介する。

IBMとSpark、そしてR

 2015年のSpark Summitにおいて、約3億ドルをSparkのサポートに投資すると大々的に発表したIBMは今回、同じイニシアティブの下で革新的なこの製品を発表した。

 Data Science Experienceは、クラウドをベースにしたSpark向け開発環境だ。これにより開発者はRを使ってコードを記述できるようになる。IBMによると、Data Science ExperienceはRStudioとH2Oのリソースに、「Jupyter」というデータ科学者向けラボノート(実験ノート)のインターフェースを組み合わせたものであり、250におよぶ厳選されたデータセットにアクセスできるようになっているという。

 Data Science Experienceの開発においてIBMは、オープンソースプロジェクトの「SparkR」とともに、「Apache Spark」プロジェクトの「Spark SQL」モジュールや「MLlib」ライブラリに対しても貢献している。同社は他にも「PySpark」プロジェクトに対する貢献について言及している。

IBMとMicrosoftの戦い

 IBMの広報担当者が筆者に語ったところによると、MicrosoftのJupyterノートブックの実装では、6日に発表されたとおり、PythonやScalaのコード実行が可能になっている一方、IBMはRも使用できるようにすることで、データ科学者が好みの言語を使えるようにしているという。

 確かにその通りだが、MicrosoftによるRevolution Analyticsの買収と、「Microsoft R Server for HDInsight」関連の6日の発表、そして今やHadoopがSparkによって強化されている点を考え合わせると、筆者は両社が互角の戦いをするのではないかと感じている。

コネクタ関連のニュース

 NoSQLデータベースのベンダーであるCouchbaseと、クラウドによるデータウェアハウスを手がけるSnowflake Computingはそれぞれ、Spark Summitの初日にSparkコネクタを発表した。「Couchbase Spark Connector」と「Snowflake Data Source for Spark」はいずれも、両社それぞれのデータベースとApache Sparkを直接接続するための製品だ。

 Snowflakeの製品は、「Spark DataFrame API」に基づいたネイティブなコネクタだ。同社はこのコネクタを用いるユースケースとして、ストリーミング/IoTデータの統合や、複雑な抽出/加工/格納(ETL)処理、機械学習を挙げている。一方Couchbaseはユースケースの例として、リアルタイムでの製品リコメンデーションや、異常検出、ネットワークの侵入検知、不正利用の検知、「包括的な製品管理や顧客管理」を挙げている。

Sparkは万能薬なのか?

 ここで明確なのは、CouchbaseとSnowflakeの両社とも、それぞれのプラットフォームがストリーミングデータの活用というシナリオにおいてSparkとの接続性を重視しているため、Sparkが重要な目的のための手段となっていることだ。一方IBMは、データ科学者やアナリティクスの専門家に向けてSparkをより使いやすくするための手段としてRを捉えている。

 自社製品にSparkというブランドを付加するこれら3社の動きは、MapRとMicrosoftの動きと同様に、ビジネス上の優れた戦略だと捉えられているようだ。現在のところ、Sparkのロゴに描かれたオレンジ色の星は、Hadoopのマスコットである黄色い象よりも光り輝いて見える。

 

この記事は海外CBS Interactive発の記事を朝日インタラクティブが日本向けに編集したものです。

  • このエントリーをはてなブックマークに追加

SpecialPR

連載

CIO
研究現場から見たAI
ITは「ひみつ道具」の夢を見る
内製化とユーザー体験の関係
米ZDNet編集長Larryの独り言
今週の明言
「プロジェクトマネジメント」の解き方
田中克己「2020年のIT企業」
松岡功「一言もの申す」
林 雅之「デジタル未来からの手紙」
谷川耕一「エンプラITならこれは知っとけ」
Fintechの正体
内山悟志「IT部門はどこに向かうのか」
情報通信技術の新しい使い方
三国大洋のスクラップブック
大河原克行のエンプラ徒然
コミュニケーション
情報系システム最適化
モバイル
通信のゆくえを追う
セキュリティ
サイバーセキュリティ未来考
セキュリティの論点
ネットワークセキュリティ
スペシャル
Gartner Symposium
企業決算
ソフトウェア開発パラダイムの進化
座談会@ZDNet
Dr.津田のクラウドトップガン対談
CSIRT座談会--バンダイナムコや大成建設、DeNAに聞く
創造的破壊を--次世代SIer座談会
「SD-WAN」の現在
展望2017
IBM World of Watson
de:code
Sapphire Now
VMworld
Microsoft WPC
HPE Discover
Oracle OpenWorld
Dell EMC World
AWS re:Invent
PTC LiveWorx
古賀政純「Dockerがもたらすビジネス変革」
さとうなおきの「週刊Azureなう」
誰もが開発者になる時代 ~業務システム開発の現場を行く~
中国ビジネス四方山話
より賢く活用するためのOSS最新動向
「Windows 10」法人導入の手引き
Windows Server 2003サポート終了へ秒読み
米株式動向
実践ビッグデータ
日本株展望
ベトナムでビジネス
アジアのIT
10の事情
エンタープライズトレンド
クラウドと仮想化