Cloud Composer
Um serviço de orquestração de fluxos de trabalho totalmente gerenciado criado no Apache Airflow.
Clientes novos ganham US $300 em créditos para gastar no Composer ou em outros produtos do Google Cloud nos primeiros 90 dias.
-
Crie, programe e monitore pipelines que abrangem ambientes de várias nuvens e de nuvem híbrida
-
Criado no projeto de código aberto do Apache Airflow (em inglês) e operado com Python
-
Libera você da dependência de fornecedores e é fácil de usar
Vantagens
Orquestração de fluxos de trabalho totalmente gerenciada
Por ser gerenciado e compatível com o Apache Airflow, o Cloud Composer permite que você se concentre na criação, na programação e no monitoramento dos fluxos de trabalho sem precisar focar no provisionamento de recursos.
Integração com outros produtos do Google Cloud
Integração total com os produtos do Google Cloud, incluindo o BigQuery, Dataflow, Dataproc, Datastore, Cloud Storage, Pub/Sub e AI Platform, o que dá liberdade aos usuários para orquestrar por completo o pipeline deles.
Compatibilidade com nuvem híbrida e várias nuvens
Crie, programe e monitore os fluxos de trabalho por meio de apenas uma ferramenta de orquestração, independentemente do pipeline estar no local, em várias nuvens ou totalmente inserido no Google Cloud.
Principais recursos
Principais recursos
Híbrido e várias nuvens
Facilite a transição para a nuvem ou mantenha um ambiente de dados híbrido orquestrando fluxos de trabalho que migram entre o local e a nuvem pública. Crie fluxos de trabalho que conectam dados, processamentos e serviços entre nuvens, garantindo um ambiente de dados unificado.
Código aberto
O Cloud Composer é baseado no Apache Airflow (em inglês), o que dá aos usuários liberdade de escolha de fornecedor e portabilidade. Esse projeto de código aberto, que tem a colaboração do Google, oferece liberdade de escolha de fornecedor para os clientes, além de integração com um grande número de plataformas, que só aumentará com o crescimento da comunidade do Airflow.
Orquestração facilitada
Os pipelines do Cloud Composer são configurados como gráficos acíclicos dirigidos (DAGs, na sigla em inglês) usando Python, facilitando o uso para todos os usuários. A implantação com um clique proporciona acesso instantâneo a uma biblioteca avançada de conectores e várias representações gráficas do fluxo de trabalho em ação, facilitando a solução de problemas. A sincronização automática dos gráficos acíclicos dirigidos garante que os jobs seguirão a programação.
Clientes
Aprenda com clientes que usam o Cloud Composer
Documentação
Documentação
Visão geral do Cloud Composer
Confira uma visão geral de um ambiente do Cloud Composer e dos produtos do Google Cloud usados para uma implantação do Apache Airflow.
Como automatizar a infraestrutura com o Cloud Composer
Saiba como programar backups automatizados das instâncias de máquinas virtuais (VMs) do Compute Engine.
Configure um pipeline de CI/CD para seu fluxo de trabalho de processamento de dados
Descubra como configurar um pipeline de implantação/integração contínuas (CI/CD) para o processamento de dados com produtos gerenciados no Google Cloud.
Ambiente de IP privado do Cloud Composer
Encontre informações sobre o uso de um ambiente de IP privado do Cloud Composer.
Como escrever DAGs (fluxos de trabalho)
Saiba como fazer um gráfico acíclico dirigido (DAG, na sigla em inglês) do Apache Airflow que é executado em um ambiente do Cloud Composer.
Google Cloud Ensina: engenharia de dados no Google Cloud
Este curso de quatro dias com professor oferece aos participantes uma introdução prática sobre como projetar e criar pipelines de dados no Google Cloud.
Todos os recursos
Todos os recursos
| Várias nuvens | Crie fluxos de trabalho que conectam dados, processamentos e serviços entre nuvens, garantindo um ambiente de dados unificado. |
| Código aberto | O Cloud Composer é baseado no Apache Airflow (em inglês), o que dá aos usuários liberdade de escolha e portabilidade. |
| Híbrido | Facilite a transição para a nuvem ou mantenha um ambiente de dados híbrido orquestrando fluxos de trabalho que migram entre o local e a nuvem pública. |
| Integrado | Integração padrão com BigQuery, Dataflow, Dataproc, Datastore, Cloud Storage, Pub/Sub (links em inglês), AI Platform e muito mais, garantindo a você a capacidade de orquestrar cargas de trabalho completas do Google Cloud. |
| Linguagem de programação Python | Aproveite habilidades atuais com Python para criar e programar fluxos de trabalho dinamicamente no Cloud Composer. |
| Confiabilidade | Aumente a confiabilidade dos fluxos de trabalho usando gráficos práticos para monitorar e solucionar diretamente a causa dos problemas. |
| Totalmente gerenciado | Por ser gerenciado, o Cloud Composer possibilita que você se concentre na criação, na programação e no monitoramento de fluxos de trabalho, sem precisar focar no provisionamento de recursos. |
| Rede e segurança | Durante a criação do ambiente, o Cloud Composer oferece as opções de configuração a seguir: ambiente do Cloud Composer com um cluster do GKE baseado em rota (padrão), ambiente de IP privado do Cloud Composer, ambiente do Cloud Composer com um cluster do GKE nativo de VPC usando endereços IP de alias e VPC compartilhada. |
Preços
Preços
Os preços do Cloud Composer são baseados no consumo, ou seja, você paga o que usa de acordo com as proporções vCPU/hora, GB/mês e GB transferidos/mês. Oferecemos vários níveis de preços porque o Cloud Composer usa diversos produtos do Google Cloud como elementos básicos.
Os preços são uniformes em todos os níveis de consumo e uso prolongado. Para mais informações, consulte a página de preços.