Cloud Composer 3 | Cloud Composer 2 | Cloud Composer 1
Halaman ini menjelaskan cara mengakses dan melihat log Apache Airflow untuk Cloud Composer.
Tentang jenis log
Cloud Composer memiliki log Airflow berikut:
Log streaming. Log ini berisi log tugas Airflow, serta log komponen Airflow di lingkungan Anda, seperti penjadwal dan pekerja Airflow.
Untuk mempelajari Cloud Logging dan Cloud Monitoring untuk lingkungan Cloud Composer, lihat Memantau lingkungan.
Log tugas Airflow di bucket lingkungan. Log ini dikaitkan dengan satu tugas DAG. Jika Anda mengaktifkan penyimpanan log ke bucket lingkungan, Cloud Composer akan menyimpan file dengan log tugas Airflow ke folder
/logs
.Cloud Composer membuat log audit, seperti log Aktivitas Admin. Untuk informasi selengkapnya, lihat Melihat log audit.
Sebelum memulai
Akun Google Anda harus memiliki peran yang dapat melihat objek di bucket lingkungan. Untuk informasi selengkapnya, lihat Kontrol akses.
Log yang disimpan di bucket lingkungan menggunakan kebijakan bucket. Cloud Composer membuat bucket dengan kebijakan default yang menyimpan data selamanya. Untuk log yang disimpan di Cloud Logging, Cloud Composer menggunakan
_Default
dan periode retensi log yang ditentukan pengguna.Untuk mencegah kehilangan data, log yang disimpan di bucket lingkungan tidak akan dihapus setelah Anda menghapus lingkungan. Anda harus menghapus log secara manual dari bucket lingkungan.
Melihat log streaming
Untuk melihat log streaming di Cloud Logging:
Konsol
Di konsol Google Cloud , buka halaman Environments.
Di daftar lingkungan, klik nama lingkungan Anda. Halaman Environment details akan terbuka.
Buka tab Logs.
Melihat log streaming di Cloud Logging
Untuk melihat log streaming di Cloud Logging:
Konsol
Di konsol Google Cloud , buka halaman Environments.
Dalam daftar lingkungan, temukan lingkungan Anda.
di kolom Logs, klik link Logs.
Melihat log tugas Airflow di bucket lingkungan
Untuk melihat log tugas Airflow di bucket lingkungan Anda:
Konsol
Di konsol Google Cloud , buka halaman Environments.
Dalam daftar lingkungan, temukan baris dengan nama lingkungan Anda, lalu di kolom DAGs folder, klik link DAGs. Halaman Detail bucket akan terbuka.
Di panel Folder browser, klik
/logs
.