Cloud Composer 3 | Cloud Composer 2 | Cloud Composer 1
本页介绍了如何访问和查看 Cloud Composer 的 Apache Airflow 日志。
日志类型简介
Cloud Composer 包含以下 Airflow 日志:
流式传输日志。这些日志包含 Airflow 任务日志,以及环境中 Airflow 组件(例如 Airflow 调度器和工作器)的日志。
如需了解适用于 Cloud Composer 环境的 Cloud Logging 和 Cloud Monitoring,请参阅监控环境。
环境存储分区中的 Airflow 任务日志。这类日志与单一 DAG 任务关联。如果您启用将日志保存到环境存储分区,Cloud Composer 会将包含 Airflow 任务日志的文件保存到
/logs
文件夹。
准备工作
您的 Google 账号必须具有可以查看环境存储分区中的对象的角色。如需了解详情,请参阅访问权限控制。
存储在环境存储分区中的日志会使用该存储分区的政策。Cloud Composer 会使用永久保留数据的默认政策创建存储分区。对于存储在 Cloud Logging 中的日志,Cloud Composer 使用
_Default
和用户定义的日志保留期限。为了防止数据丢失,在您删除环境后,存储在环境存储分区中的日志不会被删除。您必须手动从环境的存储分区中删除日志。
查看流式传输日志
如需在 Cloud Logging 中查看流式日志,请执行以下操作:
控制台
在 Google Cloud 控制台中,前往环境页面。
在环境列表中,点击您的环境名称。环境详情页面会打开。
前往日志标签页。
在 Cloud Logging 中查看流式日志
如需在 Cloud Logging 中查看流式日志,请执行以下操作:
控制台
在 Google Cloud 控制台中,前往环境页面。
在环境列表中,找到您的环境。
在日志列中,点击日志链接。
在环境的存储分区中查看 Airflow 任务日志
如需查看环境存储分区中的 Airflow 任务日志,请执行以下操作:
控制台
在 Google Cloud 控制台中,前往环境页面。
在环境列表中,找到包含环境名称的行,然后在 DAG 文件夹列中,点击 DAG 链接。系统随即会打开存储分区详情页面。
在文件夹浏览器窗格中,点击
/logs
。