Dataproc no Logging do GKE

Registros do driver do job

Consulte Registros do job do Dataproc no Logging para informações sobre como configurar e visualizar o Dataproc nos registros do driver do job do GKE Spark.

Cloud Logging

Ative o Cloud Operations para GKE para visualizar, pesquisar, filtrar e arquivar o Dataproc nos registros do GKE no Cloud Logging.

É possível pesquisar os registros do driver e do executor do Spark no Cloud Logging usando os seguintes rótulos:

  • dataproc.googleapis.com/cluster-uuid = Dataproc cluster UUID.
  • dataproc.googleapis.com/job-uuid=Dataproc job UUID
  • dataproc.googleapis.com/role

Consultas de exemplo:

labels."k8s-pod/dataproc_googleapis_com/cluster-uuid"="Dataproc cluster UUID"
labels."k8s-pod/dataproc_googleapis_com/job-uuid"="Dataproc job UUID"
labels."k8s-pod/dataproc_googleapis_com/role"="driver"

Para mais informações

  • Consulte Cloud Logging para informações sobre como acessar o Dataproc no job do GKE e nos registros de cluster no Logging.