Puoi visualizzare, cercare, filtrare e archiviare i log dei job Dataproc Metastore in Cloud Logging.
Consulta i prezzi di Google Cloud Observability per comprendere i tuoi costi.
Per informazioni sulla conservazione dei log, consulta Periodi di conservazione dei log.
Consulta Esclusioni dei log per disabilitare tutti i log o escludere i log di Logging.
Consulta la Panoramica di routing e archiviazione per instradare i log da Logging a Cloud Storage, BigQuery o Pub/Sub.
Accedi ai log dei job in Logging
Quando esegui Dataproc Metastore, l'output di un processo metastore Hive viene inviato in flusso alla console Google Cloud.
Puoi accedere a Logging utilizzando la console di Logging, il comando gcloud logging o l'API Logging.
Console
Nella console Google Cloud, vai alla Cloud Logging > Pagina Log (Esplora log):
Seleziona un progetto Google Cloud di Dataproc Metastore esistente.
Nel menu Risorse, seleziona
Dataproc Metastore Service
.Nel menu Tutti i log, seleziona il tipo di log che vuoi visualizzare.
gcloud
Google Cloud CLI include un gruppo di comandi, gcloud logging
, che forniscono un
a interfaccia a riga di comando all'API Cloud Logging. Per leggere le voci di log,
esegui questo comando:
gcloud logging read \ 'resource.type="metastore.googleapis.com/Service" resource.labels.location=LOCATION resource.labels.service_id=SERVICE_ID'
REST
Segui le istruzioni dell'API Logging per elencare le voci di log (entries.list) utilizzando l'Explorer API.
Log del servizio Dataproc Metastore in Logistica
Dataproc Metastore esporta i log di sistema e delle richieste in in Cloud Logging.
Tipo di registro | Nome log | query logName |
---|---|---|
Richiedere log | metastore.googleapis.com/requests | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Frequests) |
Log di sistema | metastore.googleapis.com/system | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Fsystem) |