Dataflow 模板

Google 提供了开源 Dataflow 模板，您可以使用这些模板来处理 Bigtable 数据，而无需编写流水线代码。本页面列出了可用的 Bigtable - Dataflow 模板。

流处理模板

使用以下模板持续处理数据。

• Bigtable change streams to BigQuery
• Bigtable change streams to Pub/Sub

批处理模板

使用以下模板批量处理数据。

• Apache Cassandra to Bigtable
• Cloud Storage Avro to Bigtable
• BigQuery to Bigtable
• Bigtable to Cloud Storage Avro
• Bigtable to Cloud Storage JSON
• Bigtable to Cloud Storage Parquet
• Bigtable to Cloud Storage SequenceFile
• Bigtable change streams to Vertex AI Vector Search
• Bigtable to Vertex AI Vector Search files on Cloud Storage
• Cloud Storage Parquet to Bigtable
• Cloud Storage SequenceFile to Bigtable

后续步骤

• 查看 Google 提供的模板的完整列表。

• 详细了解变更数据流。

• 按照 Bigtable 到 Vertex AI Vector Search 导出教程操作。

• 使用 Apache Beam 和 Bigtable 来丰富数据。