Anda dapat melihat, menelusuri, memfilter, dan mengarsipkan log tugas Dataproc Metastore di Cloud Logging.
Lihat Harga Google Cloud Observability untuk memahami biaya Anda.
Lihat Periode retensi log untuk mengetahui informasi tentang retensi logging.
Lihat Pengecualian Log untuk menonaktifkan semua log atau mengecualikan log dari Logging.
Lihat Ringkasan pemilihan rute dan penyimpanan untuk merutekan log dari Logging ke Cloud Storage, BigQuery, atau Pub/Sub.
Mengakses log tugas di Logging
Saat Anda menjalankan Dataproc Metastore, output proses metastore Hive akan di-streaming ke konsol Google Cloud.
Anda dapat mengakses Logging menggunakan konsol Logging, perintah gcloud logging, atau Logging API.
Konsol
Di konsol Google Cloud, buka halaman Cloud Logging > Logs (Logs Explorer):
Pilih project Google Cloud Dataproc Metastore yang ada.
Di bagian menu Resources, pilih
Dataproc Metastore Service
.Di menu Semua log, pilih jenis log yang ingin Anda lihat.
gcloud
Google Cloud CLI memiliki sekelompok perintah, gcloud logging
, yang menyediakan antarmuka command line ke Cloud Logging API. Untuk membaca entri log, jalankan perintah berikut:
gcloud logging read \ 'resource.type="metastore.googleapis.com/Service" resource.labels.location=LOCATION resource.labels.service_id=SERVICE_ID'
REST
Ikuti petunjuk Logging API untuk mencantumkan entri log (entries.list) menggunakan API Explorer.
Log layanan Metastore Dataproc di Logging
Dataproc Metastore mengekspor log permintaan dan sistem ke Cloud Logging.
Jenis Log | Nama Log | kueri logName |
---|---|---|
Log permintaan | metastore.googleapis.com/requests | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Frequests) |
Log sistem | metastore.googleapis.com/system | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Fsystem) |