A Central de arquitetura fornece recursos de conteúdo em uma ampla variedade de assuntos de Big Data e análise.
Recursos de Big Data e análise na Central de arquitetura
Para filtrar a lista a seguir de recursos de Big Data e análise, digite um nome de produto ou uma frase que esteja no título ou na descrição do recurso.
Como analisar dados de FHIR no BigQuery Explica os processos e considerações para a análise de dados dos Recursos rápidos de interoperabilidade de saúde (FHIR) no BigQuery. Produtos usados: BigQuery |
Arquitetura e funções em uma malha de dados Uma série que descreve como implementar uma malha de dados interna a uma organização. |
Criar uma solução de análise de visão de ML com a API Cloud Vision e o Dataflow Como implantar um pipeline do Dataflow para processar arquivos de imagem em grande escala com o Cloud Vision. O Dataflow armazena os resultados no BigQuery para que você possa usá-los no treinamento de modelos pré-criados do BigQuery ML. Produtos usados: BigQuery, Cloud Build, Cloud Storage, Cloud Vision, Dataflow e Pub/Sub" |
Exportação de métricas do Cloud Monitoring Descreve uma maneira de exportar métricas do Cloud Monitoring para análises de longo prazo. Produtos usados: App Engine, BigQuery, Cloud Monitoring, Cloud Pub/Sub, Cloud Scheduler, Datalab e Looker Studio |
Replicação contínua de dados para o BigQuery usando o Striim Demonstra como migrar um banco de dados MySQL para o BigQuery usando o Striim. O Striim é uma plataforma abrangente de extração, transformação e carregamento (ETL) de streaming. Produtos usados: BigQuery, Cloud SQL para MySQL, Compute Engine |
Replicação de dados contínua para o Spanner usando o Striim Como migrar um banco de dados MySQL para o Cloud Spanner usando o Striim. Produtos usados: Cloud SQL, Cloud SQL para MySQL, Compute Engine, Spanner |
Ciência de dados com R no Google Cloud: análise de dados exploratória Mostra como começar a usar a ciência de dados em escala com o R no Google Cloud. Esse documento é destinado a quem tem alguma experiência com R e com notebooks Jupyter e a quem está familiarizado com SQL. Produtos usados: BigQuery, Cloud Storage, Notebooks, Vertex AI |
Transformação de dados entre o MongoDB Atlas e o Google Cloud Transformação de dados entre o MongoDB Atlas como repositório de dados operacionais e o BigQuery como o data warehouse de análise. Produtos usados: BigQuery, Cloud Pub/Sub, Dataflow |
Discute como usar a Proteção de Dados Sensíveis para criar um pipeline de transformação de dados automatizado para desidentificar dados confidenciais, como informações de identificação pessoal (PII). Produtos usados: BigQuery, Cloud Pub/Sub, Cloud Storage, Dataflow, Identity and Access Management, Proteção de Dados Sensíveis |
Arquitetura de análise geoespacial Saiba mais sobre os recursos geoespaciais do Google Cloud e como usar esses recursos em aplicativos de análise geoespacial. Produtos usados: BigQuery, Dataflow |
Importar dados de uma rede externa para um data warehouse seguro do BigQuery Descreve uma arquitetura que pode ser usada para ajudar a proteger um armazenamento de dados em um ambiente de produção e oferece práticas recomendadas para importar dados de uma rede externa para o BigQuery, como um ambiente local. Produtos usados: BigQuery |
Importar dados do Google Cloud para um data warehouse seguro do BigQuery Descreve uma arquitetura que pode ser usada para ajudar a proteger um armazenamento de dados em um ambiente de produção e apresenta as práticas recomendadas para a governança de dados de um armazenamento em data warehouse no Google Cloud. Produtos usados: BigQuery, Cloud Key Management Service, Dataflow, Proteção de Dados Sensíveis |
Jump Start Solution: Analytics lakehouse Unifique data lakes e data warehouses criando um lakehouse de análise que usa o BigQuery para armazenar, processar, analisar e ativar os dados. |
Solução de início rápido: data warehouse com o BigQuery Criar um data warehouse com painel e ferramenta de visualização usando o BigQuery. |
Ajuda a planejar, projetar e implementar o processo de migração das cargas de trabalho de aplicativos e infraestrutura para o Google Cloud, incluindo cargas de trabalho de computação, banco de dados e armazenamento. Produtos usados: App Engine, Cloud Build, Cloud Data Fusion, Cloud Deployment Manager, Cloud Functions, Cloud Run, Cloud Storage, Container Registry, Data Catalog, Dataflow, Peering direto, Google Kubernetes Engine (GKE), Transfer Appliance |
Como migrar a infraestrutura no local do Hadoop para o Google Cloud Orientação para migrar cargas de trabalho locais do Hadoop para o Google Cloud... Produtos usados: BigQuery, Cloud Storage, Dataproc |
Análise de registros de segurança no Google Cloud Mostra como coletar, exportar e analisar registros do Google Cloud para auditar o uso e detectar ameaças aos dados e cargas de trabalho. Use as consultas de detecção de ameaças incluídas para BigQuery ou Chronicle ou traga seu próprio SIEM. Produtos usados: BigQuery, Cloud Logging, Compute Engine, Looker Studio |
Usar um pipeline de CI/CD para fluxos de trabalho de processamento de dados Descreve como configurar um pipeline de integração/implantação contínuas (CI/CD) para processar dados implementando métodos de CI/CD com produtos gerenciados no Google Cloud. Produtos usados: Cloud Build, Cloud Composer, Cloud Source Repositories, Cloud Storage, Compute Engine e Dataflow |
Usar o Apache Hive no Dataproc Mostra como usar o Apache Hive no Dataproc de maneira eficiente e flexível, armazenando dados do Hive no Cloud Storage e hospedando o metastore do Hive em um banco de dados MySQL no Cloud SQL. Produtos usados: Cloud SQL, Cloud Storage, Dataproc |