データ統合の新潮流「データ仮想化」とは

第2回:従来型データ統合戦略の落とし穴

小川直樹 (Denodo Technologies)

2021-02-09 07:00

 ITやビジネスの現場では、データサイロに長年悩まされてきました。データサイロが存在する、または生成される理由は幾つか考えられます。データアーキテクチャー内に旧来型のシステム(レガシーシステムなど)と最新型のシステム(モダンアプリケーションなど)が混在していると、そのシステム間でデータのやりとりをすることが困難なため、サイロが形成される一因になります。

 こうしたデータ通信の壁は、オンプレミスとクラウドの間にも存在します。年月が経過し、既存システムのストレージ増強によって複数の異なるストレージシステムが混在することになれば、それらもまた増え続けるデータサイロの要因となります。

 データのサイロ化により、ビジネスユーザーは組織内にあるさまざまなデータを利用、分析することが困難になります。また、不完全なデータが提供されることで、不正確な分析結果や結論、意思決定の遅れにつながる可能性もあります。データサイロが抱える問題点の一つは、利用したいデータに対して簡単にクエリーを実行できないことです。代わりに、データサイロごとにクエリーを実行して、その結果を手動で統合しなければなりません。このプロセスはコストと時間がかかる上に非効率的です。多くの企業は、データ統合に次のような戦略を一つないし複数使用しているのではないでしょうか。

  • 抽出(Extract)、変換(Transform)、ロード(Load)のETLプロセス。複数のサイロからデータをコピーし、データウェアハウスなどの集約的な場所に移動します
  • エンタープライズサービスバス(ESB)。これにより、アプリケーション用の通信システムを確立し、各アプリケーションで情報を共有できます
  • データ仮想化。これにより、データサイロ内のデータに関するリアルタイムの統合ビューを作成し、アプリケーション、アナリスト、ビジネスユーザーが利用できるようにします

 ETLのプロセスは、データ統合における初期の戦略でした。基本的なETLプロセスは、次の3つのステップで構成されています。(1)データをソースから抽出、(2)次にその抽出したデータのコピーを最終的な行き先が求める形式と構造に変換、(3)その変換したデータのコピーをオペレーショナルデータストア、データマート、データウェアハウスなどの最終目的地にロード――。最終段階で変換を行う場合もあり、その際は「ELT」プロセスと呼ばれますが、基本的な考え方は同じです。データ統合にETLを選択することのメリットとデメリットを分析してみましょう。

メリット:

  • ETLプロセスでは効率的かつ効果的にデータを一括で移動できる
  • ETLプロセスの技術は既存ベンダーによって十分に理解され、サポートされている
  • ほとんどの組織に社内で開発したETL機能がある

デメリット:

  • データの移動により新しいリポジトリーの保守が必要となるため、データの移動が常に最善のアプローチとは限らない
  • 大規模な組織によっては毎晩何千ものETLプロセスが実行され、変更が困難なスクリプトによって同期されている場合がある
  • 一般的にETLプロセスはコラボレーション型ではないため、エンドユーザーはデータの準備が整うまで待つ必要がある

ZDNET Japan 記事を毎朝メールでまとめ読み(登録無料)

ホワイトペーパー

新着

ランキング

  1. セキュリティ

    「デジタル・フォレンジック」から始まるセキュリティ災禍論--活用したいIT業界の防災マニュアル

  2. 運用管理

    「無線LANがつながらない」という問い合わせにAIで対応、トラブル解決の切り札とは

  3. 運用管理

    Oracle DatabaseのAzure移行時におけるポイント、移行前に確認しておきたい障害対策

  4. 運用管理

    Google Chrome ブラウザ がセキュリティを強化、ゼロトラスト移行で高まるブラウザの重要性

  5. ビジネスアプリケーション

    技術進化でさらに発展するデータサイエンス/アナリティクス、最新の6大トレンドを解説

ZDNET Japan クイックポール

注目している大規模言語モデル(LLM)を教えてください

NEWSLETTERS

エンタープライズ・コンピューティングの最前線を配信

ZDNET Japanは、CIOとITマネージャーを対象に、ビジネス課題の解決とITを活用した新たな価値創造を支援します。
ITビジネス全般については、CNET Japanをご覧ください。

このサイトでは、利用状況の把握や広告配信などのために、Cookieなどを使用してアクセスデータを取得・利用しています。 これ以降ページを遷移した場合、Cookieなどの設定や使用に同意したことになります。
Cookieなどの設定や使用の詳細、オプトアウトについては詳細をご覧ください。
[ 閉じる ]