Esta página fornece links para artigos, vídeos e podcasts públicos relacionados com o Dataflow.
Anúncios
Para ler sobre anúncios e atualizações, consulte os seguintes recursos:
- Novidades do Dataflow: Blogue da Google Cloud Platform
- Atualizações do Dataflow: Notas de lançamento do Dataflow
- Atualizações do Apache Beam: Notas de lançamento do SDK do Apache Beam
Ecossistema do Dataflow
- Dataflow, a base da análise de dados
- Dataflow Under the Hood: the origin story: Parte 1, Parte 2, Parte 3
- Visite a documentação de código aberto do Apache Beam para saber mais sobre o desenvolvimento de um modelo unificado, a definição de pipelines e a execução de pipelines no Dataflow ou num dos back-ends distribuídos suportados pelo Apache Beam.
Testemunhos de clientes
Artigos públicos
- Recolha de histórias do Dataflow – Publicação no Medium
- O Dataflow é líder em 2021 na análise de streaming: Forrester Wave
- Criar uma ferramenta que fornece feedback em tempo real sobre públicos em direto – ITV
- Monitorizar os seus pipelines do Dataflow – Publicação no Medium
- Modelo de execução para processamento de dados de baixa latência e altamente escalável – Publicação no Medium
- Acelerar a inferência do modelo de aprendizagem automática no Dataflow com GPUs – Nvidia
- Executar cálculos em grandes conjuntos de dados: Pandora
- Otimizámos o maior trabalho de fluxo de dados de sempre para o Wrapped 2020 – Spotify
- Processamento de milhares de milhões de eventos em tempo real com o Dataflow – Twitter
- Dataflow na pipeline de dados de casa inteligente – Nest
- Streaming de mensagens JSON para uma coluna do tipo JSON do BigQuery – Medium
Casos práticos
- AXA Switzerland: utilizar soluções de estatísticas da Google Cloud Platform para impulsionar os processos internos e desenvolver serviços
- Bayer Crop: melhorar a saúde do solo e a gestão das culturas com estatísticas geoespaciais no BigQuery e Dataflow
- Dow Jones: criou um gráfico de conhecimentos de eventos principais documentados em mais de 30 anos de conteúdo de notícias
- HSBC: tirar partido da nuvem para reduzir a exposição ao risco através de capacidades rápidas de estatísticas e análise
- Nintendo: usar o Dataflow e o Pub/Sub para recolher e analisar registos de utilização de jogos no BigQuery
- Quantiphi: criou uma solução de deteção de fraude de cartões de crédito em tempo real sem servidor
- SoFi Stadium: criar uma app de concierge pessoal pronta para os fãs para personalizar as experiências do dia do jogo para cada utilizador
- Spotify: experiências com o processamento de streams no Dataflow
- Subaru Corporation: usar a IA e a aprendizagem automática da Google Cloud Platform para acelerar o desenvolvimento
- Telus: acelere a modernização com a ciência dos dados
- Tokopedia: criou uma plataforma de dados de clientes na Google Cloud Platform
- Tyson Foods: reformulou a respetiva plataforma de dados através do desenvolvimento da ingestão como serviço
- Vodafone: utilizar a Google Cloud Platform para partilhar em segurança dados de telemóveis
Vídeos
Orientações técnicas
Vídeos de introdução
Artigos
- Criar uma organização orientada pela engenharia de dados
- Crie modelos a partir de qualquer pipeline do Dataflow
- Modelos do Dataflow para a nuvem elástica
- Pipelines do Dataflow: implemente e faça a gestão de pipelines de dados em grande escala
- A divisão automática do Dataflow para o BigQuery oferece um desempenho 3 vezes superior
- Exporte dados da Google Cloud Platform para o Elastic Stack com modelos do Dataflow
- Expanda o seu modelo do Dataflow com UDF
- Processamento exatamente uma vez no Dataflow: parte 1, parte 2 e parte 3
- Melhore o processamento de dados com a GPU do Dataflow
- Tratar dados duplicados no pipeline de streaming com o Dataflow e o Pub/Sub
- Aprenda padrões do Apache Beam com o processamento de fluxo de cliques de dados do Gestor de Etiquetas da Google
- Padrões de aprendizagem automática com o Apache Beam e o Dataflow Runner
- Transmitir dados para o BigQuery através da API BigQuery Storage Write
- Simplifique e automatize o processamento de dados com o Dataflow Prime
- Três formas como o Dataflow oferece ROI aos clientes
- Use padrões de referência de deteção de anomalias em tempo real para combater a fraude
- Usar a inferência do TFX com o Dataflow para padrões de inferência de AA em grande escala
- Por que motivo deve usar modelos flexíveis para as implementações do Dataflow
- Escrever pipelines do Dataflow tendo em conta a escalabilidade
- Guia de padrões de exemplos de utilização comuns do Dataflow: Parte 1, Parte 2
Vídeos sobre dados e estatísticas
Resolução de problemas e monitorização
Vídeos
Artigos
Podcasts
- Google Cloud Platform Podcast Episode 81 - Dataflow with Frances Perry
- Software Engineering Daily Podcast - Dataflow with Eric Anderson
- Software Engineering Radio Podcast Episode 272: Apache Beam