Jobtreiberlogs
Siehe Dataproc-Joblogs in Logging. Informationen zum Konfigurieren und Aufrufen von Dataproc in GKE Spark Jobtreiberlogs.
Cloud Logging
Logging aktivieren um Dataproc on GKE-Logs in Cloud Logging anzusehen, zu suchen, zu filtern und zu archivieren.
Sie können in Cloud Logging mithilfe der folgenden Labels nach Spark-Treiber- und Executor-Logs suchen:
- Dataproc.googleapis.com/cluster-uuid = Dataproc cluster UUID
- Dataproc.googleapis.com/job-uuid = Dataproc job UUID
- dataproc.googleapis.com/role
Beispielabfragen:
labels."k8s-pod/dataproc_googleapis_com/cluster-uuid"="Dataproc cluster UUID"
labels."k8s-pod/dataproc_googleapis_com/job-uuid"="Dataproc job UUID"
labels."k8s-pod/dataproc_googleapis_com/role"="driver"
Weitere Informationen
- Siehe Dataproc-Logs für Informationen zum Zugriff auf Dataproc in GKE-Job- und -Clusterlogs in Logging.