A origem do PostgreSQL e o destino do BigQuery do Datastream estão em disponibilidade geral. Leia o blog.
Ir para

Datastream

Um serviço de captura e replicação de dados alterados sem servidor e fácil de usar.

  • Acesso a streaming, dados de baixa latência do MySQL, PostgreSQL, AlloyDB e bancos de dados Oracle

  • Análise quase em tempo real no BigQuery com o Datastream para BigQuery

  • Configuração fácil de usar com conectividade segura integrada para agilizar o retorno do investimento

  • Plataforma sem servidor com escalonamento automático, sem recursos para provisionar ou gerenciar

  • Fundação segura para sincronização de bancos de dados e arquiteturas orientadas a eventos

Benefícios

Replicar e sincronizar dados com latência mínima

Sincronize dados em bancos de dados, sistemas de armazenamento e aplicativos heterogêneos de maneira confiável, com baixa latência e minimizando o impacto no desempenho da origem.

Aumente ou reduza a escala com uma arquitetura sem servidor

Comece a trabalhar rapidamente com um serviço sem servidor e fácil de usar, que aumenta ou diminui o escalonamento e não tem infraestrutura para gerenciar.

Flexibilidade incomparávelcom os serviços do Google Cloud

Conecte e integre os dados em toda a organização com os melhores serviços do Google Cloud, como BigQuery, Cloud Spanner, Dataflow e Data Fusion.

Principais recursos

Abordagem diferenciada do Datastream

Dados de streaming dos bancos de dados relacionais

O Datastream lê e entrega todas as mudanças (inserir, atualizar e excluir) dos bancos de dados MySQL, PostgreSQL, AlloyDB e Oracle para carregar dados no BigQuery, Cloud SQL, Cloud Storage e Cloud Spanner. Sem agente e nativo do Google, ele transmite de maneira confiável todos os eventos em tempo real. 

Tipos de dados normalizados em fontes

O Datastream normaliza todos os tipos de dados do evento do tipo banco de dados de origem para um tipo de fluxo de dados unificado. Essa normalização de tipo de dados sem perda entre as fontes facilita o processamento downstream, independentemente da origem dos dados e de onde eles se originaram.

Resolução de deslocamento do esquema

Com a alteração dos esquemas de origem, o Datastream permite uma resolução de deslocamento de esquema rápida e contínua. O Datastream faz a rotação dos arquivos, criando um novo arquivo no bucket de destino, a cada alteração do esquema. Os tipos de dados de origem estão a apenas uma chamada de API de distância com um Schema Registry atualizado.

Segurança incorporada ao design

O Datastream aceita vários métodos de conectividade particular e segura para proteger os dados em trânsito. Além disso, os dados são criptografados em trânsito e em repouso. Assim, você pode ficar tranquilo sabendo que os dados estão protegidos durante o streaming.

Logotipo da Major League Baseball

"As medida que estamos modernizando nossos aplicativos, replicamos os dados de maneira confiável fora da Oracle e no Cloud SQL para PostgreSQL com o Datastream, o que resultou em um tempo de inatividade mínimo para nossos aplicativos."

Shawn O'Rourke, gerente de tecnologia, MLB

Link para o blog

Novidades

Notícias e eventos sobre o Datastream

Inscreva-se para receber newsletters do Google Cloud com atualizações de produtos, informações sobre eventos, ofertas especiais e muito mais.

Documentação

Encontrar recursos e documentação do Datastream

Princípios básicos do Google Cloud
Visão geral do Datastream

Saiba como o Datastream ajuda a replicar e sincronizar dados entre bancos de dados heterogêneos, sistemas de armazenamento e aplicativos.

Guia de início rápido
Guia de início rápido do Datastream usando o Console do Cloud

Saiba como usar o Console do Google Cloud como uma interface visual para começar o streaming de dados.

Tutorial
Configurar o Datastream usando a API

Saiba como usar a API para configurar o Datastream para transferir dados de um banco de dados Oracle de origem para o Cloud Storage.

Princípios básicos do Google Cloud
Como migrar do Oracle para o Cloud SQL para PostgreSQL

Use o kit de ferramentas de código aberto baseado em Datastream do Google para migrar da Oracle para o Cloud SQL para PostgreSQL.

Tutorial
Replicar dados no BigQuery com o Datastream e o Dataflow

Aprenda a combinar o Datastream com modelos do Dataflow para replicar dados de um banco de dados relacional.

Tutorial
Como replicar dados de um banco de dados Oracle para o BigQuery

Assista este vídeo para saber como replicar dados em tempo real da Oracle para o BigQuery usando o acelerador de replicação do Data Fusion, integrado ao Datastream.

Casos de uso

Captura de dados alterados contínua: réplica de cada evento conforme ele acontece

Caso de uso
Streaming em tempo real a qualquer momento

A captura de dados alterados integra essas informações lendo eventos de alteração (inserções, atualizações e exclusões) de bancos de dados de origem e gravando-os em um destino para que seja possível realizar ações. O Datastream oferece suporte a fluxos de mudança dos bancos de dados Oracle e MySQL para BigQuery, Cloud SQL, Cloud Storage e Cloud Spanner, permitindo análise em tempo real, replicação de banco de dados e outros casos de uso. Outras fontes e destinos serão disponibilizados no futuro.

Diagrama do Datastream

Preços

Detalhes de preços do Datastream

O preço do Datastream é calculado com base nos dados mensais processados. Veja mais detalhes sobre preços na página de preços do Datastream.

Recursos adicionais, como Cloud Storage, Dataflow e BigQuery, são cobrados de acordo com os preços desse serviço.

Parceiros

Os parceiros do Google Cloud podem ajudar você a aproveitar ao máximo os dados com o Datastream.