Apache ZooKeeper

Apache ZooKeeper 集成会收集节点的流量指标，例如延迟时间、活跃请求数和活跃连接数。该集成还会收集 ZooKeeper 日志并将其解析为 JSON 载荷。结果将包含节点 ID、来源、级别和消息字段。

如需详细了解 ZooKeeper，请参阅 Apache ZooKeeper 文档。

前提条件

如需收集 ZooKeeper 遥测数据，您必须安装 Ops Agent：

对于指标，请安装 2.10.0 版或更高版本。
对于日志，请安装 2.11.0 版或更高版本。

此集成支持 ZooKeeper 3.5、3.6 和 3.7 版。

为 ZooKeeper 配置 Ops Agent

按照配置 Ops Agent 指南，添加从 ZooKeeper 实例收集遥测数据所需的元素并重启代理。

配置示例

以下命令会创建相关配置来收集和注入 ZooKeeper 的遥测数据，并重启 Ops Agent。

# Configures Ops Agent to collect telemetry from the app and restart Ops Agent.

set -e

# Create a back up of the existing file so existing configurations are not lost.
sudo cp /etc/google-cloud-ops-agent/config.yaml /etc/google-cloud-ops-agent/config.yaml.bak

# Configure the Ops Agent.
sudo tee /etc/google-cloud-ops-agent/config.yaml > /dev/null << EOF
metrics:
  receivers:
    zookeeper:
      type: zookeeper
  service:
    pipelines:
      zookeeper:
        receivers:
          - zookeeper

logging:
  receivers:
    zookeeper_general:
      type: zookeeper_general
  service:
    pipelines:
      zookeeper_general:
        receivers:
          - zookeeper_general

EOF

sudo service google-cloud-ops-agent restart
sleep 30

配置日志收集

如需从 ZooKeeper 注入日志，您必须为 ZooKeeper 生成的日志创建接收器，然后为新的接收器创建流水线。

如需为 zookeeper_general 日志配置接收器，请指定以下字段：

字段	默认	说明
`exclude_paths`		要从 `include_paths` 匹配的集合中排除的文件系统路径模式列表。
`include_paths`	`[/opt/zookeeper/logs/zookeeper-*.out, /var/log/zookeeper/zookeeper.log]`	要通过对每个文件执行 tail 来读取的文件系统路径列表。路径中可以使用通配符 (``)；例如 `/var/log/zookeeper/*.log`。
`record_log_file_path`	`false`	如果设置为 `true`，则从中获取日志记录的特定文件的路径将作为 `agent.googleapis.com/log_file_path` 标签的值显示在输出日志条目中。使用通配符时，系统只会记录从中获取记录的文件的路径。
`type`		该值必须为 `zookeeper_general`。
`wildcard_refresh_interval`	`60s`	`include_paths` 中通配符文件路径的刷新间隔。指定为时长，例如 `30s` 或 `2m`。该属性在高日志记录吞吐量下可能很有用，因为日志文件的轮替速度快于默认时间间隔。

记录的内容

logName 派生自配置中指定的接收器 ID。LogEntry 中的详细字段如下所示。

zookeeper_general 日志包含 LogEntry 中的以下字段：

字段	类型	说明
`jsonPayload.level`	字符串	日志条目级别
`jsonPayload.line`	数值	来源中导致生成日志的行号
`jsonPayload.message`	字符串	日志消息，包括详细的堆栈轨迹（如果提供）
`jsonPayload.myid`	数值	Zookeeper 实例的数字 ID
`jsonPayload.source`	字符串	日志的来源
`jsonPayload.thread`	字符串	发起日志的线程
`severity`	字符串 (`LogSeverity`)	日志条目级别（已转换）。

配置指标收集

如需从 ZooKeeper 注入指标，您必须为 ZooKeeper 生成的指标创建接收器，然后为新的接收器创建流水线。

此接收器不支持在配置中使用多个实例，例如，监控多个端点。所有这些实例都会写入相同的时序，并且 Cloud Monitoring 无法区分它们。

如需为 zookeeper 指标配置接收器，请指定以下字段：

字段	默认	说明
`collection_interval`	`60s`	时长值，例如 `30s` 或 `5m`。
`endpoint`	`localhost:2181`	ZooKeeper 公开的网址。
`type`		该值必须为 `zookeeper`。

监控的内容

下表提供了 Ops Agent 从 ZooKeeper 实例收集的指标列表。

指标类型
种类、类型受监控的资源	标签
`workload.googleapis.com/zookeeper.connection.active`
`GAUGE`、`INT64` gce_instance
`workload.googleapis.com/zookeeper.data_tree.ephemeral_node.count`
`GAUGE`、`INT64` gce_instance
`workload.googleapis.com/zookeeper.data_tree.size`
`GAUGE`、`INT64` gce_instance
`workload.googleapis.com/zookeeper.file_descriptor.limit`
`GAUGE`、`INT64` gce_instance
`workload.googleapis.com/zookeeper.file_descriptor.open`
`GAUGE`、`INT64` gce_instance
`workload.googleapis.com/zookeeper.fsync.exceeded_threshold.count`
`CUMULATIVE`、`INT64` gce_instance
`workload.googleapis.com/zookeeper.latency.avg`
`GAUGE`、`INT64` gce_instance
`workload.googleapis.com/zookeeper.latency.max`
`GAUGE`、`INT64` gce_instance
`workload.googleapis.com/zookeeper.latency.min`
`GAUGE`、`INT64` gce_instance
`workload.googleapis.com/zookeeper.packet.count`
`CUMULATIVE`、`INT64` gce_instance	`direction`
`workload.googleapis.com/zookeeper.request.active`
`GAUGE`、`INT64` gce_instance
`workload.googleapis.com/zookeeper.watch.count`
`GAUGE`、`INT64` gce_instance
`workload.googleapis.com/zookeeper.znode.count`
`GAUGE`、`INT64` gce_instance

验证配置

本部分介绍如何验证您是否正确配置了 ZooKeeper 接收器。Ops Agent 可能需要一两分钟才会开始收集遥测数据。

如需验证 ZooKeeper 日志是否已发送到 Cloud Logging，请执行以下操作：

在 Google Cloud 控制台中，转到 Logs Explorer 页面。
前往 Logs Explorer

如果您使用搜索栏查找此页面，请选择子标题为 Logging 的结果。
在编辑器中输入以下查询，然后点击运行查询：
```
resource.type="gce_instance"
log_id("zookeeper_general")
```

如需验证 ZooKeeper 指标是否已发送到 Cloud Monitoring，请执行以下操作：

在 Google Cloud 控制台中，转到 Metrics Explorer 页面：
进入 Metrics Explorer

如果您使用搜索栏查找此页面，请选择子标题为监控的结果。
在查询构建器窗格的工具栏中，选择名为 MQL 或 PromQL 的按钮。
验证已在MQL切换开关中选择 MQL。语言切换开关位于同一工具栏中，用于设置查询的格式。

在编辑器中输入以下查询，然后点击运行查询：

fetch gce_instance
| metric 'workload.googleapis.com/zookeeper.file_descriptor.limit'
| every 1m

查看信息中心

如需查看 ZooKeeper 指标，您必须配置一个图表或信息中心。 ZooKeeper 集成服务可为您提供一个或多个信息中心。在您配置集成并且 Ops Agent 开始收集指标数据后，所有信息中心都会自动安装。

您还可以在不安装集成的情况下查看信息中心的静态预览。

如需查看已安装的信息中心，请执行以下操作：

在 Google Cloud 控制台中，转到 信息中心页面：
前往信息中心

如果您使用搜索栏查找此页面，请选择子标题为监控的结果。
选择信息中心列表标签页，然后选择集成类别。
点击您要查看的信息中心的名称。

如果您已配置集成，但尚未安装信息中心，请检查 Ops Agent 是否正在运行。如果信息中心内没有图表的指标数据，则信息中心的安装将失败。Ops Agent 开始收集指标后，系统会为您安装信息中心。

如需查看信息中心的静态预览，请执行以下操作：

在 Google Cloud 控制台中，转到集成页面：
前往集成

如果您使用搜索栏查找此页面，请选择子标题为监控的结果。
点击 Compute Engine 部署平台过滤条件。
找到 ZooKeeper 的条目，然后点击查看详细信息。
选择信息中心标签页以查看静态预览。如果信息中心已安装，您可以通过点击查看信息中心来转到信息中心。

如需详细了解 Cloud Monitoring 中的信息中心，请参阅信息中心和图表。

如需详细了解如何使用集成页面，请参阅管理集成。

安装提醒政策

提醒政策会指示 Cloud Monitoring 在满足指定条件时通知您。 ZooKeeper 集成包含一项或多项提醒政策供您使用。您可以从 Monitoring 中的集成页面查看和安装这些提醒政策。

如需查看可用提醒政策的说明并安装它们，请执行以下操作：

在 Google Cloud 控制台中，转到集成页面：
前往集成

如果您使用搜索栏查找此页面，请选择子标题为监控的结果。
找到 ZooKeeper 的条目，然后点击查看详细信息。
选择提醒标签页。此标签页提供可用提醒政策的说明，并提供一个安装政策的界面。
安装提醒政策。提醒政策需要知道将提醒触发的通知发送到何处，因此它们需要您提供信息才能进行安装。如需安装提醒政策，请执行以下操作：
1. 从可用提醒政策列表中，选择您要安装的提醒政策。
2. 在配置通知部分中，选择一个或多个通知渠道。您可以选择禁止使用通知渠道，但如果您这样做，则您的提醒政策将以静默方式触发。您可以在 Monitoring 中查看其状态，但不会收到通知。
  
  如需详细了解通知渠道，请参阅管理通知渠道。
3. 点击创建政策。

如需详细了解 Cloud Monitoring 中的提醒政策，请参阅提醒简介。

如需详细了解如何使用集成页面，请参阅管理集成。

后续步骤

如需查看有关如何使用 Ansible 安装 Ops Agent、配置第三方应用和安装示例信息中心的演示，请观看安装 Ops Agent 以排查第三方应用的问题视频。