查看数据流

概览

在本部分中,您将了解如何查看有关数据流的概要信息和详细信息。

查看概要信息

有关数据流的概要信息包括:

  • 数据流的名称和状态。
  • 数据流用于将数据从源数据库传输到目标的源连接配置文件和目标连接配置文件。
  • 连接配置文件的配置文件类型。

查看详细信息

除了查看有关数据流的概要信息之外,您还可以点击数据流来查看其他信息,包括:

  • 存储数据流的区域。与所有资源一样,数据流保存在区域中。数据流只能使用同一区域中的连接配置文件和专用连接配置。
  • 数据流的创建、上次更新时间或恢复时间。
  • 添加到数据流的任何标签。这些标签用于整理数据流。
  • 对于 SQL Server 来源:为数据流选择的 CDC 方法。
  • 源数据库中的表和架构,DataStream 在处理数据流时应包含这些表和架构。
  • 源数据库中的表和架构,Datastream 在处理数据流时应排除它们。
  • 为数据流启用还是停用历史回填
    • 来源数据库中有多少架构和表从回填中排除(如果启用)。
  • 对于 BigQuery 目标位置:
    • 目标数据集是动态数据集还是默认数据集。
    • 流的写入模式是设置为合并还是仅附加
    • 如果您选择了合并模式,则过时限制配置会应用于 Datastream 创建的新 BigQuery 表。
  • 对于 Cloud Storage 目标位置:
    • 数据流将架构、表和数据从源数据库传输到的目标位置。
    • 写入目标位置的文件的格式。Datastream 支持两种输出格式:Avro 和 JSON。
  • 您的数据是否使用由 Google(由 Google 管理)或由您(由客户管理)管理的密钥加密。
  • 指向客户管理的加密密钥的链接和路径(如果您要管理加密)。
  • 用于为数据流创建提醒政策的链接。
  • 进行中、待处理或失败的回填数的状态。
  • Datastream 在过去 7 天内处理并加载到目标位置的事件数。
  • Datastream 在过去 7 天内无法处理的事件数。
  • 数据新鲜度图表。此图显示了驻留在来源中的数据与通过数据流传输到目标位置的数据之间的时间间隔。该时间间隔为 Datastream 自上次检查到来源中的新数据以来所经过的时间。

    如需详细了解此图表,请参阅监控数据流
  1. 转到 Google Cloud Console 中的数据流页面。

    转到“数据流”页面

  2. 点击要查看其详细信息的数据流。此信息显示在数据流详情页面上。

查看有关数据流的概要信息和详细信息后,您可以对其进行修改