Puoi visualizzare, cercare, filtrare e archiviare i log dei job di Dataproc Metastore in Cloud Logging.
Per comprendere i tuoi costi, consulta la pagina relativa ai prezzi di Google Cloud Observability.
Per informazioni sulla conservazione dei log, consulta Periodi di conservazione dei log.
Consulta Esclusioni dei log per disabilitare tutti i log o escludere i log da Logging.
Consulta Panoramica del routing e dell'archiviazione per instradare i log da Logging a Cloud Storage, BigQuery o Pub/Sub.
Accedi ai log dei job in Logging
Quando esegui Dataproc Metastore, l'output del processo del metastore Hive viene trasmesso in streaming alla console Google Cloud.
Puoi accedere a Logging utilizzando la console di Logging, il comando gcloud logging o l'API Logging.
Console
Nella console Google Cloud, vai alla pagina Cloud Logging > Log (Esplora log):
Seleziona un progetto Google Cloud Dataproc Metastore esistente.
Nel menu Risorse, seleziona
Dataproc Metastore Service.Nel menu Tutti i log, seleziona il tipo di log che vuoi visualizzare.
gcloud
Google Cloud CLI ha un gruppo di comandi, gcloud logging, che forniscono un'interfaccia a riga di comando per l'API Cloud Logging. Per leggere le voci di log, esegui questo comando:
gcloud logging read \
'resource.type="metastore.googleapis.com/Service"
resource.labels.location=LOCATION
resource.labels.service_id=SERVICE_ID'
REST
Segui le istruzioni dell'API Logging per elencare le voci di log (entries.list) utilizzando Explorer API.
Log di servizio Dataproc Metastore in Logging
Dataproc Metastore esporta i log di sistema e delle richieste in Cloud Logging.
| Tipo di log | Nome log | Query logName |
|---|---|---|
| Richiedere log | metastore.googleapis.com/requests | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Frequests) |
| Log di sistema | metastore.googleapis.com/system | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Fsystem) |