排查 Amazon Managed Streaming for Apache Kafka 导入主题的问题

本文档提供了一些有关 Amazon Managed Streaming for Apache Kafka (Amazon MSK) 导入主题的常见问题排查提示。

配置导入主题并开始提取消息后,您可以查看相关的 Cloud Monitoring 指标,了解系统是否提取了数据。执行以下步骤:

  1. 在控制台中,前往主题页面。

    打开“主题”

  2. 点击您要排查问题的 Amazon MSK 导入主题。

  3. 在主题详情页面中,点击指标标签页。

  4. 查看提取字节数指标的图表。

  5. 如果没有数据被提取,请在主题详情页面中检查 Topic state 字段是否存在错误。

  6. 您还可以查看提取数据源状态指标。为此,请在主题详情页面中点击指标标签页。

  7. 下面列出了您可能会遇到的错误:

    错误代码 说明 修复
    MSK_PERMISSION_DENIED 由于权限问题,无法使用 Amazon MSK 数据。 验证 AWS 角色 ARN 是否准确,并检查 AWS 角色是否具有所需的读取权限。如需了解详情,请参阅在 AWS 中创建政策
    确保存在服务账号,并且该服务账号已按照使用自定义信任政策在 AWS 中创建角色中所述的步骤正确配置。如需详细了解如何创建服务账号,请参阅在 Google Cloud中创建服务账号
    验证 Pub/Sub 服务账号是否具有 iam.serviceAccounts.getOpenIdToken 权限。 如需了解详情,请参阅向 Pub/Sub 服务账号添加 Service Account Token Creator 角色
    验证您是否已向服务账号添加了服务账号用户角色。如需了解详情,请参阅向服务账号添加服务账号用户角色
    PUBLISH_PERMISSION_DENIED 由于权限问题,向 Pub/Sub 主题发布时出错。 向 Pub/Sub 服务账号授予必要的发布权限。如需了解详情,请参阅向 Pub/Sub 服务账号添加 Pub/Sub 发布商角色
    CLUSTER_NOT_FOUND 未找到所提供的集群。 请验证集群 ARN 是否准确无误。确保集群存在且可访问。
    TOPIC_NOT_FOUND 找不到所提供的 Kafka 主题。 请验证主题名称是否准确无误。确保指定集群中存在相应主题。

如果到目前为止没有出现错误,请参阅维护健康的发布商中的最佳实践。

您还可以为导入主题启用平台日志。当您在将对象提取到 Pub/Sub 导入主题时遇到问题时,这些日志可帮助您排查问题。

Apache Kafka® 是 Apache Software Foundation 或其关联公司在美国和/或其他国家/地区的注册商标。