Google Cloud 提供了开源 Dataflow 模板,您可以使用这些模板创建 Dataflow 作业。这些作业基于预构建的 Docker 映像,适用于使用Google Cloud 控制台、Google Cloud CLI 或 REST API 调用的常见用例。本页面列出了可用的 Spanner 相关 Dataflow 模板。
批处理模板
使用以下模板批量处理数据:
- 任意源数据库到 Spanner
- Cloud Storage Avro to Spanner
- Cloud Storage Text to Spanner
- Spanner to BigQuery
- Spanner to Cloud Storage Avro
- Spanner to Cloud Storage Text
- Spanner to Vertex AI Vector Search files on Cloud Storage
如需详细了解如何使用这些模板,请参阅使用 Dataflow 导入、导出和修改数据。
流处理模板
使用以下模板持续处理数据:
- Datastream to Spanner
- Spanner 变更数据流流到任何来源数据库
- Spanner 变更数据流 to BigQuery
- Spanner 变更数据流 to Cloud Storage
- Spanner 变更数据流 to Pub/Sub
如需详细了解如何使用这些模板,请参阅使用 Dataflow 构建变更数据流连接。