本指南介绍了如何使用 Cloud Monitoring 中的 Cloud Data Fusion 监控信息中心来监控 Cloud Data Fusion 实例和流水线。
Cloud Data Fusion 信息中心提供可自定义的关键指标视图。直接在 Monitoring 中查看这些指标可让您自定义指标的过滤和汇总方式。
该信息中心包含以下视图：
- 概览：监控 Cloud Data Fusion 系统指标和日志。
- 实例：监控项目中的所有 Cloud Data Fusion 实例。
- 流水线：提供有关流水线运行和效果的信息。
如需详细了解任何视图中的指标，请将鼠标悬停在相应 widget 上，然后依次点击更多 > 在 Metrics Explorer 中查看。
准备工作
- 在 Google Cloud 控制台中，安装模板信息中心，然后选择 Cloud Data Fusion 监控信息中心模板。
价格
Cloud Monitoring 使用量会产生费用。如需了解详情，请参阅 Google Cloud Observability 价格。
所需的角色
如需获得查看指标所需的权限，请让您的管理员为您授予项目的 Monitoring Viewer (roles/monitoring.viewer) IAM 角色。如需详细了解如何授予角色，请参阅管理对项目、文件夹和组织的访问权限。
实例视图 widget
下表介绍了“实例”视图中的 widget：
| 微件 | 说明 |
|---|---|
| 正在运行的并发流水线 | 并发运行的流水线数量。 |
| 已启动的并发流水线 | 处于配置或启动状态的流水线数量。 |
| 收到的 API 请求 | 收到的 API 请求的累计数量。 |
| API 响应数量 | 已发送的 API 响应的累计数量。 |
| 授权检查次数 | 授权检查的累计次数。 |
| 授权检查时间 | 授权检查的延迟时间。 |
| 已部署的流水线数量 | 已部署的流水线数量。 |
| 草稿流水线数量 | 草稿流水线的数量。 |
| 命名空间数量 | 命名空间数量。 |
流水线视图 widget
下表介绍了“流水线”视图中的 widget：
| 微件 | 说明 |
|---|---|
| 成功的流水线运行 | 成功运行的流水线的累计数量。 |
| 失败的流水线运行 | 失败的流水线运行的累计次数。 |
| 终止的流水线运行 | 已终止的流水线运行作业的累计数量。 |
| 遭拒的流水线运行 | 遭拒的流水线运行作业的累计数量。 |
| 成功的流水线运行时间 | 成功流水线运行完成所用的时间。 |
| 流水线启动延迟时间 | 流水线运行作业达到“正在运行”状态所花费的时间。 |
| Dataproc 预配延迟时间 | 预配 Dataproc 集群所用的时间。 |
| Dataproc API 请求数 | 向 Dataproc 发出的 API 请求的累计数量。 |
| 成功的预览运行时间 | 成功预览运行完成所用的时间。 |
| 预览运行 | 预览运行次数。 |
| 流水线已读取字节数 | 流水线读取的累计字节数。 |
| 流水线已写入字节数 | 流水线写入的累计字节数。 |
| 流水线已 shuffle 字节数 | 管道中混洗的累计字节数。 |
| 插件处理输入记录 | 进入插件的记录的累计数量。 |
| 插件处理输出记录 | 退出插件的记录的累计数量。 |
查看和过滤指标
直接在 Monitoring 中查看和过滤指标：
在 Google Cloud 控制台中，前往 Metrics Explorer 页面。
选择 Cloud Data Fusion 受监控的资源。
选择一个指标。
选择过滤条件和汇总。
后续步骤
- 如需了解过滤条件和指标，请参阅 Cloud Data Fusion 指标概览。