Cloud Logging

Puedes ver, buscar, filtrar y archivar registros de trabajos de Dataproc Metastore en Cloud Logging.

Accede a los registros de trabajos en Logging

Cuando ejecutas Dataproc Metastore, se transmite un resultado del proceso del almacén de metadatos de Hive a la consola de Google Cloud.

Puedes acceder a Logging mediante la consola de Logging, el comando gcloud logging o la API de Logging.

Console

  1. En la consola de Google Cloud, ve a la página Cloud Logging > Registros (Explorador de registros):

    Ir a la página Explorador de registros

  2. Selecciona un proyecto existente de Google Cloud en Dataproc Metastore.

  3. En el menú Recursos, selecciona Dataproc Metastore Service.

  4. En el menú Todos los registros, selecciona el tipo de registro que deseas ver.

gcloud

Google Cloud CLI tiene un grupo de comandos, gcloud logging, que proporciona una interfaz de línea de comandos para la API de Cloud Logging. Para leer las entradas de registro, ejecuta el siguiente comando:

gcloud logging read \
    'resource.type="metastore.googleapis.com/Service"
    resource.labels.location=LOCATION
    resource.labels.service_id=SERVICE_ID'

REST

Sigue las instrucciones de la API de Logging para enumerar las entradas de registro (entries.list) con el Explorador de API.

Registros del servicio de Dataproc Metastore en Logging

Dataproc Metastore exporta los registros del sistema y las solicitudes a Cloud Logging.

Tipo de registro Nombre del registro Consulta de logName
Solicita registros. metastore.googleapis.com/requests logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Frequests)
Registros del sistema metastore.googleapis.com/system logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Fsystem)

Qué sigue