Sie können Dataproc Metastore-Joblogs in Cloud Logging aufrufen, durchsuchen, filtern und archivieren.
Informationen zu den Kosten finden Sie unter Google Cloud Observability-Preise.
Unter Aufbewahrungsdauer von Logs finden Sie Informationen zur Logging-Aufbewahrung.
Unter Logausschlüsse finden Sie Informationen zum Deaktivieren aller Logs oder Ausschließen von Logs vom Logging.
Unter Übersicht: Routing und Speicher erfahren Sie, wie Sie Logs von Logging an Cloud Storage, BigQuery oder Pub/Sub weiterleiten.
Auf Joblogs in Logging zugreifen
Beim Ausführen von Dataproc Metastore wird eine Ausgabe eines Hive-Metaspeicher-Prozesses ausgegeben. an die Google Cloud Console gestreamt.
Sie können auf Logging mit der Logging-Konsole, dem Befehl "gcloud logging" oder der Logging API zugreifen.
Console
Wechseln Sie in der Google Cloud Console zur Cloud Logging > Seite „Logs“ (Log-Explorer):
Wählen Sie ein vorhandenes Dataproc Metastore-Google Cloud-Projekt aus.
Wählen Sie im Menü Ressourcen die Option
Dataproc Metastore Serviceaus.Wählen Sie im Menü Alle Logs den Logtyp aus, den Sie sehen.
gcloud
Die Google Cloud CLI enthält die Befehlsgruppe gcloud logging, die ein
Befehlszeile zur Cloud Logging API. Führen Sie den folgenden Befehl aus, um Ihre Logeinträge zu lesen.
gcloud logging read \
'resource.type="metastore.googleapis.com/Service"
resource.labels.location=LOCATION
resource.labels.service_id=SERVICE_ID'
REST
Folgen Sie der Anleitung zur Logging API, um Logeinträge (entries.list) mit dem APIs Explorer aufzulisten.
Dataproc Metastore-Dienstlogs in Logging
Dataproc Metastore exportiert Anfrage- und Systemlogs nach Cloud Logging:
| Logtyp | Logname | logName-Abfrage |
|---|---|---|
| Logs anfordern | metastore.googleapis.com/requests | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Frequests) |
| Systemprotokolle | metastore.googleapis.com/system | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Fsystem) |