Cloud Logging

Puoi visualizzare, cercare, filtrare e archiviare i log dei job di Dataproc Metastore in Cloud Logging.

Accedere ai log dei job in Logging

Quando esegui Dataproc Metastore, l'output del processo del metastore Hive viene trasmesso in Google Cloud Console.

Puoi accedere a Logging utilizzando la console di logging, il comando gcloud logging o l'API Logging.

console

  1. In Google Cloud Console, vai alla pagina Cloud Logging > Logs (Esplora log):

    Vai alla pagina Esplora log

  2. Seleziona un progetto Dataproc Metastore Cloud esistente.

  3. Nel menu Risorse, seleziona Dataproc Metastore Service.

  4. Nel menu Tutti i log, seleziona il tipo di log che vuoi visualizzare.

gcloud

L'interfaccia a riga di comando di Google Cloud ha un gruppo di comandi, gcloud logging, che forniscono un'interfaccia a riga di comando per l'API Cloud Logging. Per leggere le voci di log, esegui il comando seguente:

gcloud logging read \
    'resource.type="metastore.googleapis.com/Service"
    resource.labels.location=LOCATION
    resource.labels.service_id=SERVICE_ID'

REST

Segui le istruzioni dell'API Logging per elencare le voci di log (entries.list) utilizzando Explorer API.

Log di servizio Dataproc Metastore in Logging

Dataproc Metastore esporta la richiesta e i log di sistema in Cloud Logging.

Tipo di log Nome log Query logName
Log richiesta metastore.googleapis.com/requests logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Frequests)
Log di sistema metastore.googleapis.com/system logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Fsystem)

Passaggi successivi