Saat menjalankan pipeline di Cloud Data Fusion, Anda bisa mendapatkan log untuk pemantauan dan proses debug langsung dari halaman Pipeline Studio setelah pipeline dijalankan dimulai.
Untuk opsi logging lainnya, lihat Melihat log audit dan Melihat log pipeline di Cloud Logging.
Sebelum memulai
Anda memerlukan pipeline Cloud Data Fusion. Jika Anda belum memilikinya, lihat Panduan Memulai.
Melihat log pipeline
Untuk melihat log pipeline di Cloud Data Fusion:
Buka halaman Pipeline Studio tempat Anda mengedit dan menjalankan pipeline.
Klik Logs untuk mendapatkan daftar pesan log.
Memantau pipeline yang berjalan
Untuk memantau progres pipeline, klik Log saat pipeline berjalan.
Memfilter log
Untuk memfilter pesan log pipeline, buka menu drop-down Level, lalu pilih jenis pesan yang diinginkan:
- Error
- Peringatkan
- Info
- Debug
- Trace
Menggunakan log lanjutan
Jika melihat log pipeline di Cloud Data Fusion, Anda akan mendapatkan pesan dasar tentang pipeline di berbagai tahap menjalankannya. Untuk mendapatkan pesan tambahan tentang kondisi cluster Dataproc dan mesin eksekusi, klik View Advanced Logs.
Anda bisa mendapatkan log lanjutan kapan saja selama pratinjau pipeline atau menjalankannya.
Untuk kembali melihat log dasar, klik Sembunyikan Log Lanjutan.
Melihat pesan log terbaru
Mulai Cloud Data Fusion 6.1.4, saat mengklik Logs, Anda akan langsung membuka pesan log terbaru. Di semua versi, untuk melihat pesan terbaru, klik Scroll to Recent Logs.
Download log
Anda dapat mendownload log dari Cloud Logging. Jika Cloud Logging tidak diaktifkan, setelah pipeline dijalankan selesai, Anda dapat mendownload file log langsung dari halaman Pipeline Studio. File ini berisi pesan log lanjutan dan pesan rekaman aktivitas, yang berguna untuk proses debug.
Buka halaman Pipeline List lalu klik pipeline yang diinginkan.
Pipeline akan terbuka di halaman Pipeline Studio.
Klik Log.
Klik Download Semua.
Opsional: Untuk melihat log teks biasa di browser, buka menu drop-down Download All, lalu pilih View Raw Logs.
Langkah selanjutnya
- Pelajari cara melihat log audit.
- Pelajari cara melihat log pipeline di Cloud Logging.