配置请求日志记录

本页介绍了如何为媒体 CDN 配置请求日志记录。

启用日志

默认情况下，日志记录功能处于停用状态，以尽可能减少存储的数据量。系统会路由、过滤和存储日志，并将其存储在 Cloud Logging 中。

  • 为特定媒体 CDN 服务启用日志记录功能：

    gcloud edge-cache services update YOUR_SERVICE \
   --enable-logging \
   --logging-sample-rate=1.0

  • 停用日志记录：

    gcloud edge-cache services update YOUR_SERVICE \
   --no-enable-logging

  • 获取服务的当前状态：

    gcloud edge-cache services describe YOUR_SERVICE

    输出类似于以下内容：

    ...
logConfig:
 enable: true
 sampleRate: 1.0
...

设置日志采样率

对于大量请求，您可能更希望对日志进行抽样，并依靠指标进行主动监控和调查，而不是为每个请求捕获日志。

要仅注入和存储 10% 的请求的日志，请将 logConfig.sampleRate 至 0.1：

gcloud edge-cache services update YOUR_SERVICE \
    --enable-logging \
    --logging-sample-rate=0.1

必须启用日志记录才能更改采样率。

除非另有说明，否则采样率默认为 0 (0%)，即 会记录针对已配置服务的每个请求。

查询日志

如需查询日志，您可以使用 Logs Explorer 您也可以使用 Google Cloud CLI。

如需在 Google Cloud 控制台中查看日志，请过滤出媒体 CDN 资源类型和（可选）按项目和服务名称指定。

以下日志记录查询显示了 所有媒体 CDN 服务的日志：

resource.type="edgecache.googleapis.com/EdgeCacheRouteRule"

如需过滤与特定 EdgeCacheService 资源和项目关联的日志，请扩展此查询：

resource.type="edgecache.googleapis.com/EdgeCacheRouteRule"
resource.labels.resource_container="projects/12345678"
resource.labels.service_name="MY_PROJECT"

如需按部分名称进行匹配或使用正则表达式，请参阅日志记录查询语言对比。

示例：识别缓存未命中

对对象的请求可能是缓存未命中，但可能会导致以下对象的缓存填充 原因如下：

  • 存留时间 (TTL) 过短
  • 过于具体的缓存键
  • 请求过少，无法保留在缓存中

如需找出缓存未命中情况，您可以在日志浏览器中过滤日志。

以下日志查询显示了可缓存（已查找）但 需要从源填充：

resource.type="edgecache.googleapis.com/EdgeCacheRouteRule"
resource.labels.resource_container="projects/12345678"
resource.labels.service_name="MY_PROJECT"
jsonPayload.cacheStatus="miss"

如果您需要按特定网址进行过滤， httpRequest.requestUrl 字段：

httpRequest.requestUrl = "URL"

若要按网址的一部分（例如路径组成部分）进行过滤，请使用 has 运算符：

# `:` is the `has` comparison operator

httpRequest.requestUrl: "/videos/1381381_1080.mp4"
# You can use `OR` or `AND` to filter on multiple values

httpRequest.requestUrl: ("https://media-test.example.com/" OR "https://canary.example.net")

如需详细了解 Logging 的匹配和过滤的全面语法，请参阅使用 Logging 查询语言编写高级查询。

过滤存储的日志

如需在存储日志之前过滤日志（例如，仅捕获相关字段以减少需要存储和查询的日志总量），您可以配置排除项过滤条件，以便在存储之前定义包含或排除字段的查询（过滤条件）。

您还可以设置多个过滤条件，例如捕获所有缓存未命中请求或特定主机名的所有请求，并仅对所有日志进行采样。

路由日志

媒体 CDN 直接与 Cloud Logging 集成， 可以通过以下方式帮助您汇总和路由日志：

  • 存储到 Cloud Storage 和 BigQuery 等存储目标位置

  • 到 Pub/Sub 主题，第三方目标位置可以订阅该主题以访问日志

如需简要了解从 Logging 路由日志的方式，请参阅 路由和存储概览。

后续步骤