Modèles Dataflow

Google fournit des modèles Dataflow Open Source que vous pouvez utiliser pour traiter vos données Bigtable au lieu d'écrire le code du pipeline. Cette page répertorie les modèles Bigtable – Dataflow disponibles.

Streaming templates

Utilisez les modèles suivants pour traiter les données en continu.

• Flux de modifications Bigtable vers BigQuery
• Flux de modifications Bigtable vers Pub/Sub

Batch templates

Utilisez les modèles suivants pour traiter des données de manière groupée.

• Apache Cassandra vers Bigtable
• Cloud Storage Avro vers Bigtable
• BigQuery vers Bigtable
• Bigtable vers Cloud Storage Avro
• Bigtable vers Cloud Storage JSON
• Bigtable vers Cloud Storage Parquet
• Bigtable vers Cloud Storage SequenceFile
• Changement de flux Bigtable vers Vertex AI Vector Search
• Bigtable vers fichiers Vertex AI Vector Search sur Cloud Storage
• Cloud Storage Parquet vers Bigtable
• Cloud Storage SequenceFile vers Bigtable

Étapes suivantes

• Consultez la liste complète des modèles fournis par Google.

• En savoir plus sur les flux de modifications

• Suivez un tutoriel pour utiliser Bigtable vers Vertex AI Vector Search Export.

• Enrichissez les données à l'aide d'Apache Beam et de Bigtable.