跨 Google Cloud 项目路由事件

---

本教程介绍如何使用 Eventarc 从一个 Google Cloud 项目中的来源读取事件，并将其路由到另一个 Google Cloud 项目中的目标目标位置。可以通过将 Pub/Sub 用作跨项目传输层来实现。

目标

在此教程中，您将学习以下操作：

1. 在一个项目中创建一个主题，然后从另一个项目发布到该主题。这会使用 Eventarc 触发器将事件路由到未经身份验证的 Cloud Run 服务。

2. 使用适用于 Cloud Storage 的 Pub/Sub 通知将 Cloud Storage 事件从一个项目发布到另一个项目。使用 Eventarc 触发器将事件路由到未经身份验证的 Cloud Run 服务。

3. 使用 Cloud Logging 接收器将 Cloud Audit Logs 从一个项目发布到另一个项目。使用 Eventarc 触发器将事件路由到未经身份验证的 Cloud Run 服务。

注意：所有 Cloud Run 服务在默认情况下都会以私密方式部署，这意味着，如果不在请求中提供身份验证凭据，就无法访问这些服务。对于采用网域限定共享组织政策的项目，请使用经过身份验证的 Cloud Run 目标服务，而不是允许公开（未经身份验证）访问的服务。

费用

在本文档中，您将使用 Google Cloud 的以下收费组件：

• Cloud Logging
• Cloud Run
• Cloud Storage
• Compute Engine
• Eventarc
• Pub/Sub

您可使用价格计算器根据您的预计使用情况来估算费用。 Google Cloud 新用户可能有资格申请免费试用。

准备工作

您的组织定义的安全限制条件可能会导致您无法完成以下步骤。如需了解相关问题排查信息，请参阅在受限的 Google Cloud 环境中开发应用。

请注意，本教程将需要两个项目。以下步骤适用于这两个项目。

1. 登录您的 Google Cloud 账号。如果您是 Google Cloud 新手，请创建一个账号来评估我们的产品在实际场景中的表现。新客户还可获享 $300 赠金，用于运行、测试和部署工作负载。

2. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

   Note: If you don't plan to keep the resources that you create in this procedure, create a project instead of selecting an existing project. After you finish these steps, you can delete the project, removing all resources associated with the project.

   Go to project selector

3. 确保您的 Google Cloud 项目已启用结算功能。

4. Install the Google Cloud CLI.

5. To initialize the gcloud CLI, run the following command:

   gcloud init

6. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

   Note: If you don't plan to keep the resources that you create in this procedure, create a project instead of selecting an existing project. After you finish these steps, you can delete the project, removing all resources associated with the project.

   Go to project selector

7. 确保您的 Google Cloud 项目已启用结算功能。

8. Install the Google Cloud CLI.

9. To initialize the gcloud CLI, run the following command:

   gcloud init

10. 更新 gcloud 组件：

    gcloud components update

11. 使用您的账号登录：

    gcloud auth login

跨项目路由 Pub/Sub 事件

由于 Pub/Sub 是全球分布式服务，因此您可以在一个项目中创建主题，从另一个项目发布到该主题，然后触发 Eventarc 以将消息路由到 Cloud Run 服务：

1. 将 Google Cloud 项目 ID 设置为第二个项目：

   gcloud config set project PROJECT_TWO_ID
   

   将 PROJECT_TWO_ID 替换为您的第二个 Google Cloud 项目的 ID。

2. 在第二个项目中，执行以下操作：

   1. 启用 Cloud Run 和 Eventarc API：

      gcloud services enable run.googleapis.com eventarc.googleapis.com
      

   2. 设置默认位置：

      REGION=REGION
      

      将 REGION 替换为您选择的受支持的 Eventarc 位置。例如 us-central1。

   3. 创建 Pub/Sub 主题：

      TOPIC=my-topic
      gcloud pubsub topics create $TOPIC
      

   4. 使用预构建的映像 us-docker.pkg.dev/cloudrun/container/hello 部署未经身份验证的 Cloud Run 服务：

      gcloud run deploy hello \
          --image=us-docker.pkg.dev/cloudrun/container/hello \
          --allow-unauthenticated \
          --region=$REGION
      

      当您看到服务网址时，表示部署完成。

   5. 使用 Eventarc 触发器将主题连接到该服务：

      gcloud eventarc triggers create cross-project-trigger \
          --destination-run-service=hello \
          --destination-run-region=${REGION} \
          --location=${REGION} \
          --event-filters="type=google.cloud.pubsub.topic.v1.messagePublished" \
          --transport-topic=projects/PROJECT_TWO_ID/topics/$TOPIC
      

      这将创建一个名为 cross-project-trigger 的触发器。

3. 将 Google Cloud 项目 ID 设置为第一个项目：

   gcloud config set project PROJECT_ONE_ID
   

   将 PROJECT_ONE_ID 替换为您的第一个 Google Cloud 项目的 ID。

4. 在第一个项目中，向第二个项目中的主题发布消息：

   gcloud pubsub topics publish projects/PROJECT_TWO_ID/topics/$TOPIC --message="hello"
   

5. 将 Google Cloud 项目 ID 设置为第二个项目：

   gcloud config set project PROJECT_TWO_ID
   

6. 在第二个项目中，确认生成的事件已记录：

   gcloud logging read "resource.labels.service_name=hello AND jsonPayload.message:hello" --format=json
   

   系统会返回如下所示的日志条目：

   "message": "Received event of type google.cloud.pubsub.topic.v1.messagePublished. Event data: hello"
   

跨项目路由 Cloud Storage 事件

使用适用于 Cloud Storage 的 Pub/Sub 通知将事件从一个项目发布到另一个项目，然后通过 Eventarc 触发器将事件路由到 Cloud Run 服务：

1. 将 Google Cloud 项目 ID 设置为第一个项目：

   gcloud config set project PROJECT_ONE_ID
   

2. 创建 Cloud Storage 存储桶，请运行以下命令：

   PROJECT1=$(gcloud config get-value project)
   BUCKET=$PROJECT1-cross-project
   gcloud storage buckets create gs://$BUCKET --location=${REGION}
   

3. 针对第二个项目中的主题为该存储桶创建 Pub/Sub 通知：

   gcloud storage buckets notifications create gs://$BUCKET --topic=projects/PROJECT_TWO_ID/topics/$TOPIC --payload-format=json
   

4. 将文件上传到该存储桶：

   echo "Hello World" > random.txt
   gcloud storage cp random.txt gs://$BUCKET/random.txt
   

5. 将 Google Cloud 项目 ID 设置为第二个项目：

   gcloud config set project PROJECT_TWO_ID
   

6. 在第二个项目中，确认生成的事件已记录：

   gcloud logging read "resource.labels.service_name=hello AND jsonPayload.message:random.txt" --format=json
   

   系统会返回如下所示的日志条目：

   Received event of type google.cloud.pubsub.topic.v1.messagePublished. Event data: {
     "kind": "storage#object",
     "id": "project1-cross-project/random.txt/1635327604259719",
     "selfLink": "https://www.googleapis.com/storage/v1/b/project1-cross-project/o/random.txt",
     "name": "random.txt",
     "bucket": "project1-cross-project",
     "generation": "1635327604259719",
   [...]
   }
   

跨项目路由 Cloud Audit Logs 事件

当创建与触发器的过滤条件匹配的审核日志条目时，可能会触发对您的服务的请求。如需了解详情，请参阅确定 Cloud Audit Logs 的事件过滤条件。在这种情况下，在第一个项目中创建 Compute Engine 虚拟机实例时，与触发器的过滤条件匹配的审核日志条目可让您捕获事件并将其路由到第二个项目中的 Cloud Run 服务：

1. 将 Google Cloud 项目 ID 设置为第一个项目：

   gcloud config set project PROJECT_ONE_ID
   

2. 在第一个项目中，为 Compute Engine 启用管理员读取、数据读取和数据写入日志类型：

   请注意，在项目级层，您需要 roles/owner Identity and Access Management (IAM) 角色才能为 Google Cloud 资源配置数据访问审核日志。

   1. 读取您项目的 IAM 政策，并将其存储在一个文件中：

      gcloud projects get-iam-policy PROJECT_ONE_ID > /tmp/policy.yaml
      

   2. 修改 /tmp/policy.yaml，仅添加或更改数据访问审核日志配置。

      注意：您必须保留 bindings: 和 etag: 部分而不进行任何更改。否则可能导致您的项目不可用。

      auditConfigs:
      - auditLogConfigs:
        - logType: ADMIN_READ
        - logType: DATA_READ
        - logType: DATA_WRITE
        service: compute.googleapis.com
      

   3. 写入新的 IAM 政策：

      gcloud projects set-iam-policy PROJECT_ONE_ID /tmp/policy.yaml
      

      如果上述命令报告与其他更改发生冲突，请重复以上步骤（从读取项目的 IAM 政策开始）。

3. 在第一个项目中，创建一个 Cloud Logging 接收器以将 Cloud Audit Logs 路由到第二个项目中的主题：

   gcloud logging sinks create cross-project-sink \
       pubsub.googleapis.com/projects/PROJECT_TWO_ID/topics/my-topic \
       --log-filter='protoPayload.methodName="beta.compute.instances.insert"'
   

   系统应会返回如下所示的提醒：

   Please remember to grant `serviceAccount:[e-mail]` the Pub/Sub Publisher role on the topic.
   

4. 将 Google Cloud 项目 ID 设置为第二个项目：

   gcloud config set project PROJECT_TWO_ID
   

5. 在第二个项目中，将角色授予服务账号：

   gcloud pubsub topics add-iam-policy-binding my-topic \
       --member=SERVICE_ACCOUNT \
       --role=roles/pubsub.publisher
   

   将 SERVICE_ACCOUNT 替换为上一步中返回的服务账号电子邮件地址。

6. 将 Google Cloud 项目 ID 设置为第一个项目：

   gcloud config set project PROJECT_ONE_ID
   

7. 在第一个项目中，创建 Compute Engine 虚拟机实例。

   如果您使用 Google Cloud 控制台创建虚拟机实例，则可以接受默认值，供本教程使用。

8. 将 Google Cloud 项目 ID 设置为第二个项目：

   gcloud config set project PROJECT_TWO_ID
   

9. 在第二个项目中，确认生成的事件已记录：

   gcloud logging read "resource.labels.service_name=hello AND jsonPayload.message:beta.compute.instances.insert" --format=json
   

   系统会返回如下所示的日志条目：

   Received event of type google.cloud.pubsub.topic.v1.messagePublished. Eventdata: {
     "logName": "projects/workflows-atamel/logs/cloudaudit.googleapis.com%2Factivity",
     "operation": {
       "id": "operation-1635330842489-5cf5321f4f454-ecc363cd-3883c08d",
       "last": true,
       "producer": "compute.googleapis.com"
     },
     "protoPayload": {
       "@type": "type.googleapis.com/google.cloud.audit.AuditLog",
       "methodName": "beta.compute.instances.insert",
     }
   [...]
   }
   

清理

如果您为本教程创建了一个新项目，请删除项目。 如果您使用的是现有项目，希望保留此项目且不保留本教程中添加的任何更改，请删除为教程创建的资源。

删除项目

为了避免产生费用，最简单的方法是删除您为本教程创建的项目。

要删除项目，请执行以下操作：

注意：删除项目会产生以下影响：

• 项目中的所有内容都会被删除。如果您将现有项目用于本文档中的任务，则删除该项目后，还将删除您已在该项目中完成的任何其他工作。
• 自定义项目 ID 丢失。创建此项目时，您可能创建了要在将来使用的自定义项目 ID。要保留使用该项目 ID 的网址（例如 appspot.com 网址），请删除项目内的所选资源，而不是删除整个项目。

如果您打算探索多个架构、教程或快速入门，则重复使用项目可以帮助您避免超出项目配额限制。

1. In the Google Cloud console, go to the Manage resources page.

   Go to Manage resources

2. In the project list, select the project that you want to delete, and then click Delete.
3. In the dialog, type the project ID, and then click Shut down to delete the project.

删除教程资源

1. 删除您在本教程中部署的 Cloud Run 服务：

   gcloud run services delete SERVICE_NAME

   其中，SERVICE_NAME 是您选择的服务名称。

   您还可以从 Google Cloud 控制台中删除 Cloud Run 服务。

2. 移除您在教程设置过程中添加的任何 gcloud CLI 默认配置。

   例如：

   gcloud config unset run/region

   或

   gcloud config unset project

3. 删除在本教程中创建的其他 Google Cloud 资源：

   • 删除 Eventarc 触发器：

     gcloud eventarc triggers delete TRIGGER_NAME
     

     将 TRIGGER_NAME 替换为您的触发器的名称。

   • 删除 Pub/Sub 主题：

     gcloud pubsub topics delete TOPIC TOPIC_ID
     

     将 TOPIC_ID 替换为您的主题的 ID。

   • 删除 Cloud Logging 接收器：

     gcloud logging sinks delete SINK_NAME
     

     将 SINK_NAME 替换为您的接收器的名称。

后续步骤

• 了解 Eventarc 位置
• 尝试其他教程