Modelos do Dataflow

O Google fornece modelos do Dataflow de código aberto que podem ser usados para processar os dados do Bigtable em vez de escrever o código do pipeline. Nesta página, listamos os modelos disponíveis do Bigtable: Dataflow.

Modelos de streaming

Use o modelo a seguir para processar dados continuamente.

• Fluxos de alterações do Bigtable para o BigQuery
• Fluxos de alterações do Bigtable para o Pub/Sub

Modelos de lotes

Use os modelos a seguir para processar dados em massa.

• Apache Cassandra para Bigtable
• Cloud Storage Avro para Bigtable
• BigQuery para Bigtable
• Bigtable para Cloud Storage Avro
• Bigtable para JSON do Cloud Storage
• Bigtable para Cloud Storage Parquet
• Bigtable para Cloud Storage SequenceFile
• Fluxos de alterações do Bigtable para a Vertex AI Vector Search
• Bigtable para arquivos de pesquisa de vetor da Vertex AI no Cloud Storage
• Cloud Storage Parquet para Bigtable
• Cloud Storage SequenceFile para Bigtable

A seguir

• Veja a lista completa de modelos fornecidos pelo Google.

• Saiba mais sobre os fluxos de alterações

• Siga um tutorial do Bigtable para exportar a pesquisa de vetor da Vertex AI.

• Usar o Apache Beam e o Bigtable para enriquecer os dados