使用适用于 Apache Flink 的 BigQuery 引擎监控界面

使用适用于 Apache Flink 的 BigQuery 引擎创建部署和运行作业时,您可以使用基于网络的监控界面查看有关部署和作业的详细信息并与之交互。

使用<a href="https://console.cloud.google.com/" target="console" track-type="inline link" referrerpolicy="no-referrer-when-downgrade">Google Cloud console</a>访问适用于 Apache Flink 的 BigQuery 引擎监控界面。此监控界面可以显示以下内容:

  • 适用于 Apache Flink 的所有 BigQuery 引擎部署的列表
  • 所有正在运行的适用于 Apache Flink 的 BigQuery 引擎作业的列表
  • 有关作业状态的详细信息
  • 每个作业的图形表示
  • 作业执行期间出现的错误或警告
  • 部署和作业的其他诊断信息

您可以在适用于 Apache Flink 的 BigQuery 引擎监控界面中查看图表。这些图表会显示部署和作业持续时间内的各种指标。

访问适用于 Apache Flink 的 BigQuery 引擎监控界面

如需访问监控界面,请按以下步骤操作:

  1. 登录 Google Cloud 控制台。
  2. 选择您的 Google Cloud 项目。
  3. 打开导航菜单。
  4. 分析中,点击适用于 Apache Flink 的 BigQuery 引擎
  5. 如需查看有关部署的详细信息,请点击部署。如需查看作业详情,请点击作业

系统会显示部署或作业列表及其状态。 如需详细了解部署或作业,请点击相应名称。如果您没有看到任何部署或作业,则需要创建部署或运行新作业。

如需了解如何创建部署,请参阅创建和管理部署。如需了解如何运行作业,请参阅创建和管理作业

部署可能具有以下状态:

  • -:监控界面尚未从适用于 Apache Flink 的 BigQuery 引擎服务收到状态
  • 正在初始化:正在创建部署
  • 已创建:部署已创建
  • 终止:正在删除部署
  • 已终止:部署已被删除

作业可能具有以下状态:

  • -:监控界面尚未从适用于 Apache Flink 的 BigQuery 引擎服务收到状态
  • 正在初始化:作业已创建,但系统在启动前需要一些时间进行准备
  • 已创建:作业已创建,但尚未运行
  • 正在运行:作业正在运行
  • 正在取消:正在取消作业
  • 已取消:作业已取消
  • 正在更新正在更新作业
  • 已更新:作业已更新
  • 已完成:作业已成功完成
  • 失败:作业未能完成
  • 正在重启:作业正在重新启动。如果作业遇到错误并从检查点重启,则可能会显示此状态。
  • 已暂停:作业已暂停

访问监控视图

您可以访问部署和作业的监控视图。

部署

如需访问用于监控部署的图表,请在适用于 Apache Flink 的 BigQuery Engine 监控界面中点击部署名称。系统会显示部署详情页面,其中包含以下信息:

  • “部署信息”面板:关于部署的描述性信息
  • 日志:适用于 Apache Flink 的 BigQuery 引擎服务在部署级别生成的日志。如需了解详情,请参阅日志记录
  • 指标:包含有关部署的信息的图表

部署详情页面中,您可以使用详情日志指标标签页来切换部署视图。

求职招聘

如需访问用于监控作业的图表,请在适用于 Apache Flink 的 BigQuery 引擎监控界面中点击作业名称。系统会显示作业详情页面,其中包含以下信息:

  • 作业图:作业的图形表示
  • “作业信息”面板:关于作业的描述性信息
  • 日志:适用于 Apache Flink 的 BigQuery Engine 服务生成的作业日志。如需了解详情,请参阅日志记录
  • 指标:包含有关作业运行情况的信息的图表

作业详情页面内,您可以使用指标标签页来切换作业视图。

作业图

当您选择特定作业时,监控界面会提供作业的图形表示,即作业图。控制台中的标签页还提供了作业摘要、作业日志以及作业中每个步骤的相关信息。如需详细了解作业图,请参阅 适用于 Apache Flink 的 BigQuery Engine 作业图

指标

您可以访问部署和作业的监控图表。

部署指标

您可以在适用于 Apache Flink 的 BigQuery Engine 部署监控界面的指标标签页中查看图表。您可以查看以下指标图表:

  • CPU 利用率
  • 内存利用率

作业指标

在适用于 Apache Flink 的 BigQuery Engine 作业监控界面的指标标签页中,您可以查看图表。您可以查看以下指标图表:

  • 每秒的传入记录数
  • 每秒的传出记录数
  • 输入水印
  • 输出水印
  • 自动扩缩图表

后续步骤

  • 详细了解可用的作业指标

  • 使用 Cloud Monitoring 查看适用于 Apache Flink 的其他 BigQuery 引擎指标,包括自定义指标