Modelos do Dataflow

Google Cloud fornece modelos de Dataflow de código aberto que podem ser usados para criar jobs do Dataflow. Esses jobs são baseados em imagens do Docker pré-criadas para casos de uso comuns usando o consoleGoogle Cloud , a CLI do Google Cloud ou as chamadas da API REST. Esta página lista os modelos de Dataflow disponíveis relacionados ao Spanner.

Modelos de lotes

Use os modelos a seguir para processar dados em massa:

• Qualquer banco de dados de origem para o Spanner
• Cloud Storage Avro para Spanner
• Cloud Storage Text para Spanner
• Spanner para o BigQuery
• Spanner para o Cloud Storage Avro
• Spanner para texto do Cloud Storage
• Spanner para arquivos de pesquisa de vetor da Vertex AI no Cloud Storage

Para mais informações sobre como usar esses modelos, consulte Importar, exportar e modificar dados usando o Dataflow.

Modelos de streaming

Use os modelos a seguir para processar dados continuamente:

• Datastream para o Spanner
• Fluxos de alterações do Spanner para qualquer banco de dados de origem
• Fluxos de alterações do Spanner para o BigQuery
• Fluxos de alterações do Spanner para o Cloud Storage
• Fluxos de alterações do Spanner para o Pub/Sub

Para mais informações sobre o uso desses modelos, consulte Criar conexões de fluxos de alterações usando o Dataflow.

A seguir

• Veja a lista completa de modelos fornecidos pelo Google.
• Saiba mais sobre os streams de alterações do Spanner.