Visão geral do tratamento e análise de dados | Documentation

Visão geral de pipelines e análise de dados

Carregue, transforme e analise dados para fornecer insights de Business Intelligence.

Conheça a análise de dados e os pipelines no Google Cloud

Leia a documentação e os artigos do Centro de arquitetura do Cloud sobre análise de dados e produtos, recursos e procedimentos de pipeline.

Introdução ao carregamento de dados no BigQuery

Saiba como carregar dados em lote ou por streaming no BigQuery.

Recursos de dados e análise

Planeje sua abordagem com os recursos da Central de arquitetura sobre uma variedade de tópicos de dados e análise. Acessa a Central de arquitetura.

Padrões de design para análise de dados

Planejar padrões de design para soluções de análise de dados do mundo real. (Acessa a Central de arquitetura.)

Solução Jump Start: Analytics Lakehouse

Planejar como projetar um lakehouse de análise para armazenar, processar e ativar dados. (Acessa a Central de arquitetura.)

Treinamento, artigos do blog e muito mais

Acesse cursos de treinamento, artigos de blog e outros recursos relacionados.

Programa de aprendizado do Data Analyst

Estude as tecnologias do Google Cloud essenciais para a função de analista de dados. Acessa o treinamento do Google Cloud Ensina.

Programa de aprendizado sobre BI e análise com o Looker

Estude como analisar os dados no Looker e configure análises de autoatendimento para seus usuários. Acessa o treinamento do Google Cloud Ensina.

Árvore de decisão para cargas de trabalho de dados e análise

Consulte uma árvore de decisão para escolher serviços para executar cargas de trabalho de dados e análise. (Acessa o blog do Google Cloud.)

Análise de dados e produtos de pipelines por caso de uso

Abra as seções ou use o filtro para encontrar produtos e guias para casos de uso comuns.

Plataformas e pacotes de produtos de análise de dados e pipelines

Analise dados locais e externos com ferramentas de machine learning e IA. Depois, compartilhe e acesse insights com segurança, sem precisar gerenciar a infraestrutura.

BigQuery

Analise dados usando um data warehouse totalmente gerenciado e altamente escalonável com ML integrado.

BigLake no BigQuery

Consulte dados estruturados em repositórios de dados externos com delegação de acesso.

BigQuery Storage

Use o armazenamento otimizado para executar consultas analíticas em grandes conjuntos de dados, ingestão de streaming e leituras de alta capacidade.

Introdução à migração para o BigQuery

Migre seu data warehouse para o BigQuery usando ferramentas sem custos financeiros que ajudam em cada fase da migração, incluindo avaliação e planejamento, tradução de SQL para mais de 10 dialetos, transferência e validação de dados.

Análise de dados

Consulte conjuntos de dados enormes com ferramentas SQL, de análise geoespacial e de BI que suportam análises ad hoc e programáticas, além de compartilhamento de dados.

Analytics Hub

Uma plataforma de troca de dados que permite compartilhar dados e insights em escala além dos limites organizacionais com uma estrutura robusta de segurança e privacidade.

Análise do BigQuery

Aumente seus investimentos em análise de dados ao executar consultas analíticas em grandes conjuntos de dados.

BigQuery ML

Crie e execute modelos de machine learning (ML) usando consultas do GoogleSQL, além de acessar LLMs e APIs de IA do Cloud para realizar tarefas de inteligência artificial (IA), como geração de texto ou tradução automática.

Dataproc

Execute operações de processamento, consulta e streaming em lote usando serviços Apache Spark e Hadoop gerenciados.

Earth Engine

O Google Earth Engine é um serviço de processamento geoespacial. Com o Earth Engine, você pode realizar o processamento geoespacial em escala com a tecnologia do Google Cloud Platform.

Looker.

Acesse, analise e realize ações na versão confiável e atualizada dos seus dados

Looker Studio

Conte ótimas histórias sobre dados para dar suporte a melhores decisões de negócios.

Governança de dados

Controle e gerencie a qualidade ao longo do ciclo de vida dos dados ao compartilhá-los dentro e fora da organização.

Data Catalog

Descubra e analise suas informações usando um serviço de gerenciamento de metadados e descoberta de dados escalonável e totalmente gerenciado.

Dataplex

Organize seus dados em lakes e zonas e automatize o gerenciamento de dados e a governança desses dados para potencializar a análise em escala.

Proteção de dados sensíveis

Descubra e edite dados confidenciais.

Introdução à governança de dados no BigQuery

Implementar e aplicar as políticas de governança de dados do BigQuery.

Ingestão de dados

Migre, transmita e carregue dados em lote em uma arquitetura de armazenamento sem servidor de alta capacidade.

Apache Kafka para BigQuery

Um serviço de nuvem gerenciado que permite ingerir streams do Kafka diretamente no Google Cloud.

Serviço de transferência de dados do BigQuery

Automatiza a migração de dados para o BigQuery de maneira programada e gerenciada. Sua equipe de análise pode criar a base para um armazenamento de dados do BigQuery sem escrever uma única linha de código.

Cloud Data Fusion

Crie e gerencie rapidamente pipelines de dados usando uma integração de dados totalmente gerenciada e sem código com uma interface gráfica.

Dataflow

Desenvolva em tempo real pipelines de processamento de dados em lote e stream.

Dataproc

Execute operações de processamento, consulta e streaming em lote usando serviços Apache Spark e Hadoop gerenciados.

Dataproc Metastore

Use um metastore Apache Hive (HMS) totalmente gerenciado que é executado no Google Cloud para gerenciar seu data lake e metadados, além de fornecer interoperabilidade entre os vários mecanismos de processamento de dados e ferramentas que você usa.

Dataproc sem servidor

Use o Dataproc sem servidor para executar cargas de trabalho do Spark sem provisionar nem gerenciar o próprio cluster.

Datastream

Um serviço de captura de dados alterados (CDC) e replicação sem servidor e fácil de usar.

Pub/Sub

Ingira streams de eventos de qualquer lugar, em qualquer escala.

Serviço de transferência do Cloud Storage

Transfira dados entre serviços de armazenamento na nuvem, como o AWS S3 e o Cloud Storage.

Transfer Appliance

Envie grandes volumes de dados para o Google Cloud usando armazenamento em rack.

Orquestração de dados

Organize e otimize sua cadeia de gerenciamento de cargas de trabalho com conexões perfeitas entre processos e fontes de dados.

Cloud Composer

Crie, agende, monitore e gerencie fluxos de trabalho usando um serviço de orquestração totalmente gerenciado, desenvolvido no Apache Airflow.

Dataform

O Dataform oferece uma experiência completa que ajuda as equipes de dados a criar, controlar a versão e orquestrar fluxos de trabalho SQL no BigQuery.

Processamento de dados

Transforme seus dados com ferramentas avançadas de ETL, fluxo de trabalho SQL e DML.