Anda dapat melihat, menelusuri, memfilter, dan mengarsipkan log tugas Metastore Dataproc di Cloud Logging.
Lihat Harga Kemampuan Observasi Google Cloud untuk memahami biaya Anda.
Lihat Periode retensi data log untuk mengetahui informasi tentang retensi logging.
Lihat Pengecualian Log untuk menonaktifkan semua log atau mengecualikan log dari Logging.
Lihat Ringkasan pemilihan rute dan penyimpanan untuk merutekan log dari Logging ke Cloud Storage, BigQuery, atau Pub/Sub.
Mengakses log tugas di Logging
Saat Anda menjalankan Dataproc Metastore, output proses metastore Hive akan di-streaming ke Konsol Google Cloud.
Anda dapat mengakses Logging menggunakan Konsol Logging, perintah gcloud logging, atau Logging API.
Konsol
Di konsol Google Cloud, buka halaman Cloud Logging > Logs (Logs Explorer):
Pilih project Google Cloud Dataproc Metastore yang sudah ada.
Di bawah menu Resource, pilih
Dataproc Metastore Service
.Di menu All logs, pilih jenis log yang ingin Anda lihat.
gcloud
Google Cloud CLI memiliki sekelompok perintah, gcloud logging
, yang menyediakan antarmuka command line ke Cloud Logging API. Untuk membaca entri log Anda,
jalankan perintah berikut:
gcloud logging read \ 'resource.type="metastore.googleapis.com/Service" resource.labels.location=LOCATION resource.labels.service_id=SERVICE_ID'
REST
Ikuti petunjuk Logging API untuk mencantumkan entri log (entries.list) menggunakan API Explorer.
Log layanan Dataproc Metastore di Logging
Dataproc Metastore mengekspor log permintaan dan log sistem ke Cloud Logging.
Jenis Log | Nama Log | Kueri logName |
---|---|---|
Log permintaan | metastore.googleapis.com/requests | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Frequests) |
Log sistem | metastore.googleapis.com/system | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Fsystem) |