Modèles Dataflow

Google fournit des modèles Dataflow Open Source que vous pouvez utiliser pour traiter vos données Bigtable au lieu d'écrire le code de votre pipeline. Cette page répertorie les modèles Bigtable – Dataflow disponibles.

Streaming templates

Utilisez les modèles suivants pour traiter les données en continu.

• Flux de modifications Bigtable vers BigQuery
• Flux de modifications Bigtable vers Pub/Sub

Batch templates

Utilisez les modèles suivants pour traiter des données de façon groupée.

• Apache Cassandra vers Bigtable
• Cloud Storage Avro vers Bigtable
• BigQuery vers Bigtable
• Bigtable vers Cloud Storage Avro
• Bigtable vers Cloud Storage JSON
• Bigtable vers Cloud Storage Parquet
• Bigtable vers Cloud Storage SequenceFile
• Bigtable vers fichiers Vertex AI Vector Search sur Cloud Storage
• Cloud Storage Parquet vers Bigtable
• Cloud Storage SequenceFile vers Bigtable

Étapes suivantes

• Consultez la liste complète des modèles fournis par Google.

• En savoir plus sur les flux de modifications

• Suivez un tutoriel sur l'exportation de données vectorielles Vertex AI à partir de Bigtable.

• Utilisez Apache Beam et Bigtable pour enrichir les données.