変更データのキャプチャとレプリケーションを最大限に活用する方法を学びます。Datastream のリリースのお知らせをご覧ください。

ジャンプ先

DataStream のプレビュー

サーバーレスで使いやすい変更データ キャプチャおよびレプリケーション サービスです。

  • action/check_circle_24px Sketch で作成。

    Oracle データベースと MySQL データベースからの低レイテンシのストリーミング データへのアクセス

  • action/check_circle_24px Sketch で作成。

    リアルタイム解析、異種データベース同期、イベント ドリブン アーキテクチャを強化

  • action/check_circle_24px Sketch で作成。

    自動スケーリングに対応したサーバーレス プラットフォーム。プロビジョニングや管理のためのリソースも必要ありません。

  • action/check_circle_24px Sketch で作成。

    安全性の高い組み込み接続が利用できる使いやすい設定で、価値創出までの時間を短縮

  • action/check_circle_24px Sketch で作成。

    BigQueryCloud SpannerDataflowData FusionのようなGoogle Cloud サービス全体での統合

利点

レイテンシを最小限に抑えてデータの複製と同期を行う

ソース パフォーマンスへの影響を最小限に抑えながら、異種データベース、ストレージ システム、およびアプリケーション間でデータを低遅延で確実に同期します。

サーバーレス アーキテクチャをシームレスにスケールアップ / スケールダウンできます。

シームレスにスケールアップまたはスケールダウンし、管理が必要なインフラストラクチャがない、サーバーレスで使いやすいサービスを簡単な設定ですぐに始めることができます。

Google Cloud サービスの比類のない柔軟性

BigQueryCloud SpannerDataflow および Data Fusion のような Google Cloud サービスを活用して組織全体のデータを接続して統合します。

主な機能

Datastream の独自のアプローチ

Oracle と MySQL からのデータのストリーミング

Datastream は、Oracle データベースと MySQL データベースから変更(挿入、更新、削除)をすべて読み取り、配信し、BigQueryCloud SQLCloud StorageCloud Spanner にデータを読み込みます。エージェントレスかつ Google ネイティブであるため、あらゆるイベントを確実にストリーミングできます。

ソース間での正規化されたデータ型

DataStream は、すべてのイベントデータ型をソース データベースの型から統一されたDataStream 型に正規化します。ソース間でのロスレスのデータ型の正規化により、データの取得元に関係なく、ソースに依存しない方法で下流の処理を簡単に行うことができます。

スキーマ ドリフトの解決

ソーススキーマが変化すると、DataStream では高速でシームレスなスキーマ ドリフトを解決できます。DataStream は、スキーマが変更されるたびに、ファイルをローテーションし、転送先バケットに新しいファイルを作成します。元のソースデータ型は、最新のバージョニングされたスキーマ レジストリを使用して API 呼び出しするだけです。

安全性を重視した設計

Datastream は、転送中のデータを保護するための、複数の安全なプライベート接続方法をサポートしています。さらに、データは転送時も保存時も暗号化されるため、ストリーミングされるデータは保護されており安心です。

導入事例

データストリームでデータを複製しているお客様の事例

「アプリケーションをモダナイズするうえで、データストリームを使用して、Oracle から Cloud SQL for PostgreSQL に確実にデータを複製しています。これにより、アプリケーションのダウンタイムを最小限に抑えることができました。」

MLB テクノロジー担当マネージャー Shawn O'Rourke 氏
ブログへのリンク

最新情報

データストリームに関するニュースとイベント

Google Cloud のニュースレターにご登録いただくと、プロダクトの最新情報、イベント情報、スペシャル オファーのお知らせなどが配信されます。

ドキュメント

Datastream のリソースとドキュメントを検索する

Google Cloud の基礎
Datastream の概要

Datastream が、異種データベース、ストレージ システム、アプリケーションの間でデータの複製と同期を行う方法について学びます。

クイックスタート
Cloud Console を使用した Datastream のクイックスタート

Google Cloud Console をビジュアル インターフェースとして使用してデータのストリーミングを開始する方法について学びます。

チュートリアル
API を使用してデータストリームを構成する

API を使用して、ソース Oracle データベースから Cloud Storage にデータを転送するように Datastream を構成する方法を学びます。

Google Cloud の基礎
Oracle から Cloud SQL for PostgreSQL に移行する方法

Google のデータストリームベースのオープンソース ツールキットを使用して、Oracle から Cloud SQL for PostgreSQL に移行します。

チュートリアル
Datastream と Dataflow でデータを BigQuery に複製する

この動画では、Datastream と Dataflow テンプレートを組み合わせて、リレーショナル データベースからデータを複製する方法について説明しています。

チュートリアル
Oracle データベースから BigQuery にデータを複製する方法

この動画では、Datastream と統合されている Data Fusion のレプリケーション アクセラレータを使用して、Oracle から BigQuery にリアルタイムでデータを複製する方法を説明しています。

ユースケース

継続的な変更データ キャプチャ、発生したすべてのイベントの複製

ユースケース
ストリームをいつでもリアルタイムで変更可能

変更データ キャプチャは、ソース データベースからの変更イベント(挿入、更新、削除)を読み取り、それをデータ 宛先に書き込むことでデータを統合し、アクションを実行します。Datastream は、Oracle データベースや MySQL データベースから BigQuery、Cloud SQL、Cloud Storage、Cloud Spanner への変更ストリームをサポートし、これによりリアルタイム分析やデータベース レプリケーションなどのユースケースが可能になります。他のソースや宛先は今後追加される予定です。

DataStream 図

料金

データストリームの料金の詳細

データストリームの料金は、実際に処理された月間データに基づいて計算されます。料金の詳細については、データストリームの料金ページをご覧ください。

Cloud Storage、Dataflow、BigQuery などの追加リソースは、該当するサービスの料金に応じて課金されます。

パートナー

Google Cloud パートナーは、Datastream でデータを最大限に活用できます。