Dataflow 模板

Google 提供开放的 来源 可用于处理 Bigtable 的 Dataflow 模板 而无需编写流水线代码。本页面列出了可用的 Bigtable - Dataflow 模板。

流处理模板

使用以下模板持续处理数据。

• Bigtable change streams to BigQuery
• Bigtable change streams to Pub/Sub

批处理模板

使用以下模板批量处理数据。

• Apache Cassandra to Bigtable
• Cloud Storage Avro to Bigtable
• BigQuery to Bigtable
• Bigtable to Cloud Storage Avro
• Bigtable 到 Cloud Storage JSON
• Bigtable to Cloud Storage Parquet
• Bigtable to Cloud Storage SequenceFile
• Bigtable 更改流到 Vertex AI Vector Search
• Bigtable to Vertex AI Vector Search files on Cloud Storage
• Cloud Storage Parquet to Bigtable
• Cloud Storage SequenceFile to Bigtable

后续步骤

• 查看 Google 提供的模板的完整列表。

• 详细了解变更数据流。

• 按照教程了解如何将 Bigtable 迁移到 Vertex AI 向量搜索 导出。

• 使用 Apache Beam 和 Bigtable 来丰富数据。