GPUs com o Dataflow
As GPUs do Dataflow oferecem os benefícios acelerados diretamente ao pipeline de processamento de dados de stream ou em lote. Use o Dataflow para simplificar o processo de recebimento de dados da GPU e aproveitar a localidade dos dados. Ao mesmo tempo, aproveite todos os benefícios do sistema totalmente gerenciado do Dataflow: provisionamento de host, escalonamento automático, tolerância a falhas e mais.
Executar um job do Dataflow com GPUs
Siga este tutorial para ver como criar uma imagem de contêiner personalizada e executar um pipeline do Dataflow com GPUs.
Executar um pipeline simples do PyTorch com GPUs
Siga este tutorial para criar um pipeline do PyTorch e executá-lo no Dataflow com GPUs.
Executar um pipeline com GPUs NVIDIA L4
O tipo de GPU L4 é útil para executar pipelines de inferência de machine learning.
Executar um pipeline simples do TensorFlow com GPUs
Siga este tutorial para criar um pipeline do TensorFlow e executá-lo no Dataflow com GPUs.
Recursos
Práticas recomendadas ao desenvolvedor
Veja um exemplo de fluxo de trabalho de desenvolvedor para a criação de pipelines usando GPUs.
Ajuste direito
Use o ajuste direto com os jobs em lote para personalizar recursos do worker e reduzir custos.
Resolver problemas de jobs que usam GPUs
Se você encontrar problemas ao executar o job do Dataflow com GPUs, siga estas etapas de solução de problemas.