Datastream 的 PostgreSQL 来源和 BigQuery 目标位置已正式发布。 阅读博客
跳转到
Datastream

Datastream

这是一项无服务器且易于使用的变更数据捕获和复制服务。

  • 访问 MySQL、PostgreSQL、AlloyDB 和 Oracle 数据库中的低延迟流式传输数据

  • 借助 Datastream for BigQuery,在 BigQuery 中实现近乎实时的分析

  • 通过内置安全连接轻松进行设置,可更快实现价值

  • 可自动扩缩的无服务器平台,无需预配或管理任何资源

  • 数据库同步和事件驱动型架构的安全基础

优势

以较短的延迟时间复制和同步数据

以可靠方式跨异构数据库、存储系统和应用同步数据,同时将对源性能的影响降至最低。

通过无服务器架构扩容或缩容

借助简单易用的无服务器服务快速启动,该服务可无缝扩缩并且没有基础架构需要管理。

通过 Google Cloud 服务实现前所未有的灵活性

使用 BigQueryCloud SpannerDataflowData Fusion 等出色 Google Cloud 服务连接并集成您组织中的数据。

主要特性

Datastream 的独特方法

从关系型数据库流式传输数据

Datastream 从 MySQL、PostgreSQL、AlloyDB 和 Oracle 数据库中读取和传送每个更改(插入、更新和删除),以将数据加载到 BigQueryCloud SQLCloud StorageCloud Spanner 中。作为无代理的 Google 原生服务,Datastream 以可靠的方式实时流式传输每个事件。Datastream 每月处理超过五千亿个事件。

将不同来源的数据类型标准化

Datastream 会将每个事件的数据类型从源数据库的类型转换为统一的 Datastream 类型。对不同来源的数据类型进行无损标准化后,下游处理无需考虑数据的来源,因此变得十分简单。

架构偏移解析

当源架构变化时,Datastream 可以进行快速无缝的架构偏移解析。Datastream 会在每次架构更改时轮替文件,在目标存储桶中创建新文件。借助具有版本控制的最新版 Schema Registry,只需进行一次 API 调用即可轻松转换原始的源数据类型。

原生安全

Datastream 支持多种安全的专用连接方法,以保护传输中的数据。此外,数据在传输过程中和静态存储时都会加密,因此在整个流式传输期间都会受到保护,您可以安心无忧。

客户

向使用 Datastream 复制数据的客户学习经验