Halaman ini menjelaskan logging pipeline di Cloud Data Fusion.
Untuk setiap operasi pipeline data yang dijalankan, Cloud Data Fusion menghasilkan log untuk membantu Anda memantau berjalannya pipeline data dan men-debug masalah. Segera setelah pipeline dijalankan, Anda dapat melihat log dan memfilternya berdasarkan level log.
Anda dapat mengakses log tersebut di Cloud Data Fusion Studio di halaman Pratinjau dan halaman Detail pipeline. Untuk memantau progres pipeline, klik Logs saat pipeline berjalan.
Filter log berdasarkan level
Ketika melihat pesan log pipeline, Anda dapat memfilternya menurut jenis, atau level log:
- Error
- Peringatan
- Informatif
- Men-debug
- Trace
Untuk menyetel level log, buka halaman Preview atau halaman Pipeline details di Cloud Data Fusion Studio, lalu klik Logs > Level. Pilih jenis pesan yang ingin Anda tampilkan di log.
Melihat log dasar atau lanjutan
Untuk setiap operasi pipeline, Anda dapat melihat log dasar atau lanjutan. Log dasar mencakup pesan tentang tahapan-tahapan pipeline. Log lanjutan mencakup semua pesan log dasar, serta informasi tentang kondisi cluster dan mesin eksekusi.
Untuk melihat log lanjutan selama pratinjau atau operasi pipeline, buka halaman Pratinjau atau halaman Detail pipeline di Cloud Data Fusion Studio, lalu klik Logs > Lihat log lanjutan.
Untuk kembali melihat log dasar, klik Sembunyikan Log Lanjutan.
Melihat pesan log terbaru
Jika pipeline Anda dijalankan dengan sejumlah besar pesan, Anda dapat membuka bagian bawah halaman untuk melihat pesan terbaru. Buka halaman Pratinjau di Cloud Data Fusion Studio atau halaman Detail pipeline, lalu klik Logs > Scroll.
Mendownload log
Untuk masalah proses debug, setelah proses pipeline selesai, Anda dapat mendownload file log yang berisi semua pesan log dan pelacakan tumpukan lanjutan.
Untuk mendownload file log, buka halaman Preview atau halaman Pipeline details di Cloud Data Fusion Studio, lalu klik Logs > Download all.
Untuk melihat log mentah sebagai teks biasa di tab browser baru, klik Download all > View raw logs.
Langkah selanjutnya
- Pelajari pipeline lebih lanjut.