Dataflow テンプレート

Google は、パイプライン コードを記述する代わりに Bigtable データの処理に使用できるオープンソースの Dataflow テンプレートを提供しています。このページでは、利用可能な Bigtable - Dataflow テンプレートの一覧を示します。

ストリーミング テンプレート

データを継続的に処理するには、次のテンプレートを使用します。

• BigQuery への Bigtable 変更ストリーム
• Pub/Sub への Bigtable 変更ストリーム

バッチ テンプレート

データを一括で処理するには、次のテンプレートを使用します。

• Apache Cassandra to Bigtable
• Cloud Storage Avro to Bigtable
• BigQuery to Bigtable
• Bigtable to Cloud Storage Avro
• Bigtable to Cloud Storage JSON
• Bigtable to Cloud Storage Parquet
• Bigtable to Cloud Storage SequenceFile
• Bigtable change streams to Vertex AI Vector Search
• Bigtable to Vertex AI Vector Search files on Cloud Storage
• Cloud Storage Parquet to Bigtable
• Cloud Storage SequenceFile to Bigtable

次のステップ

• Google 提供のテンプレートの一覧を確認する。

• 変更ストリームの詳細を確認する。

• Bigtable to Vertex AI Vector Search Export のチュートリアルを見る。

• Apache Beam と Bigtable を使用してデータを拡充する。