Registro de Dataproc en GKE

Registros del controlador de trabajos

Consulta Registros de trabajos de Dataproc en Logging para obtener información sobre cómo configurar y ver los registros del controlador de trabajos de Spark de Dataproc en GKE.

Cloud Logging

Habilita el registro para ver, buscar, filtrar y archivar los registros de Dataproc en GKE en Cloud Logging.

Puedes buscar registros del controlador y del ejecutor de Spark en Cloud Logging con las siguientes etiquetas:

  • dataproc.googleapis.com/cluster-uuid = Dataproc cluster UUID
  • dataproc.googleapis.com/job-uuid = Dataproc job UUID
  • dataproc.googleapis.com/role

Ejemplos de búsquedas:

labels."k8s-pod/dataproc_googleapis_com/cluster-uuid"="Dataproc cluster UUID"
labels."k8s-pod/dataproc_googleapis_com/job-uuid"="Dataproc job UUID"
labels."k8s-pod/dataproc_googleapis_com/role"="driver"

¿Qué sigue?