Esta página fornece links para artigos públicos, vídeos e podcasts relacionados ao Dataflow
Anúncios
Para ler sobre avisos e atualizações, consulte os seguintes recursos:
- Novidades do Dataflow: blog do Google Cloud
- Atualizações do Dataflow: Notas de lançamento do Dataflow
- Atualizações do Apache Beam: notas da versão do SDK do Apache Beam
Ecossistema do Dataflow
- Dataflow, a espinha dorsal da análise de dados
- Por trás do Dataflow: a história da origem Parte 1 Parte 2, Parte 3
- Acesse a documentação de código aberto do Apache Beam para saber mais sobre como desenvolver um modelo unificado, definir pipelines e executar pipelines no Dataflow ou em um dos back-ends distribuídos compatíveis com o Apache Beam.
Histórias de clientes
Artigos públicos
- Coleção de histórias do Dataflow: publicação média
- Seja líder em análise de streaming em 2021 – Forrester Wave
- Ferramenta de criação de feedback em tempo real sobre públicos ao vivo – ITV
- Como monitorar seus pipelines do Dataflow – Medium Publication
- Modelo de execução para processamento de dados altamente escalonável e de baixa latência – Medium Publication
- Como acelerar a inferência de modelos de machine learning no Dataflow com GPUs - Nvidia
- Como executar computação em grandes conjuntos de dados – Pandora
- Otimizado o maior job de Dataflow já lançado para o Wrapped 2020 – Spotify
- Processamento de bilhões de eventos em tempo real usando o Dataflow - Twitter
- Dataflow no pipeline de dados de casa inteligente: Nest
- Como transmitir mensagens JSON para a coluna do tipo JSON do BigQuery: Medium
Estudos de caso
- AXA Suíça: Usando as soluções de análise do Google Cloud para impulsionar os processos internos e desenvolver serviços
- Bayer Crop: Melhorando a saúde do solo e o gerenciamento de culturas com análise geoespacial no BigQuery e no Dataflow
- Dow Jones: Criou um Mapa de informações dos principais eventos documentados em mais de 30 anos de conteúdo de notícias
- HSBC: Adoção da nuvem para reduzir a exposição a riscos com insights rápidos e recursos de análise.
- Nintendo: como usar o Dataflow e o Pub/Sub para coletar e analisar registros de uso de jogos no BigQuery
- Quantiphi: Criou uma solução de detecção de fraudes de cartão de crédito em tempo real sem servidor
- SoFi Stadium: Criando um app de concierge pessoal pronto para fãs para personalizar as experiências de dias de jogo para cada usuário
- Spotify: experimentos com processamento de stream no Dataflow
- Subaru Corporation: Usando a IA e o machine learning do Google Cloud para acelerar o desenvolvimento
- Telus: Acelerar a modernização com ciência de dados
- Tokopedia: Criou uma plataforma de dados do cliente no Google Cloud
- Tyson Foods: Reformulou a plataforma de dados desenvolvendo a ingestão como serviço
- Vodafone: Usando o Google Cloud para compartilhar dados de smartphones com segurança
Vídeos
Orientação técnica
Vídeos de apresentação
Artigos
- Como criar a organização orientada por engenharia de dados
- Crie modelos com base em qualquer pipeline do Dataflow
- Modelos do Dataflow para Elastic Cloud
- Pipelines do Dataflow, implante e gerencie pipelines de dados em escala
- A fragmentação automática do Dataflow para BigQuery oferece três vezes mais desempenho
- Exportar dados do Google Cloud para o Elastic Stack com modelos do Dataflow
- Estender o modelo do Dataflow com o UDF
- Processamento único no Dataflow: Parte 1, Parte 2, Parte 3
- Impulsione seu processamento de dados com a GPU do Dataflow
- Como processar dados duplicados no pipeline de streaming usando o Dataflow e o Pub/Sub
- Conheça os padrões do Beam com o processamento Clickstream de dados do Gerenciador de tags do Google
- Padrões de machine learning com o Apache Beam e o Dataflow Runner
- Como fazer streaming de dados no BigQuery usando a API Storage Write
- Simplifique e automatize o processamento de dados com o Dataflow Prime
- Três maneiras que o Dataflow proporciona ROI aos clientes
- Use padrões de referência de detecção de anomalias em tempo real para combater fraudes
- Como usar inferência TFX com o Dataflow para padrões de inferência de ML em larga escala
- Por que usar modelos Flex para as implantações do Dataflow
- Como criar canais do Dataflow para ter escalonabilidade
- Guia para padrões de caso de uso comuns do Dataflow: Parte 1, Parte 2
Vídeos de dados e análise
Solução de problemas e monitoramento
Vídeos
Artigos
Podcasts
- Episódio 81 do Google Cloud - Dataflow com Frances Perry
- Podcast diário sobre engenharia de software - Cloud Dataflow com Eric Anderson
- Podcast de rádio sobre engenharia de software, episódio 272: Apache Beam