Halaman ini menjelaskan cara mengaktifkan Cloud Logging untuk instance Cloud Data Fusion dan cara melihat log pipeline.
Sebelum memulai
Membuat instance Cloud Data Fusion. Butuh waktu hingga 30 menit untuk menyelesaikan proses pembuatan instance.
Aktifkan Cloud Logging
Untuk menggunakan Cloud Logging dengan pipeline Cloud Data Fusion, aktifkan Cloud Logging saat Anda membuat instance Cloud Data Fusion.
- Di Konsol Google Cloud, buka halaman Instance.
- Klik Create instance.
- Klik Tampilkan opsi lanjutan.
Di bagian Logging and monitoring, klik Enable Stackdriver logging service.
Setelah membuat instance, Anda tidak dapat mengaktifkan Cloud Logging di Konsol Google Cloud. Sebagai gantinya, jalankan perintah gcloud CLI ini:
gcloud beta data-fusion instances update INSTANCE_NAME \
--project=PROJECT_ID \
--location=LOCATION \
--enable_stackdriver_logging
Lihat log
Setiap pipeline Cloud Data Fusion yang dijalankan akan diberi RunID
yang unik. Setelah men-deploy dan menjalankan pipeline, temukan RunID
-nya. Selanjutnya, di
Logging, gunakan RunID
untuk melihat log
pipeline Anda.
Mendapatkan RunID pipeline
- Buka instance Anda:
Di konsol Google Cloud, buka halaman Cloud Data Fusion.
Untuk membuka instance di antarmuka web Cloud Data Fusion, klik Instance, lalu klik View instance.
- Klik Ringkasan > Tabel.
Klik link
RunId
untuk menyalin.
Melihat log di Logs Explorer
Buka halaman Cloud Logging > Logs Explorer di konsol Google Cloud:
Di menu filter, pilih Cluster Cloud Dataproc >
cdap-PIPELINE_NAME-YOUR_RUNID
.
Opsional: Memfilter log
Gunakan menu filter untuk memfilter log. Anda dapat memfilter menurut berbagai
tingkat keparahan log
atau berdasarkan komponen seperti datafusion-pipeline-logs
.
Opsional: Mendownload log
Klik Download log.
Untuk mengetahui informasi selengkapnya, lihat dokumentasi Cloud Logging untuk mendownload entri log.
Langkah selanjutnya
- Pelajari cara melihat log audit.
- Pelajari cara melihat log pipeline dari Cloud Data Fusion Pipeline Studio.