Sie können Dataproc Metastore-Joblogs in Cloud Logging aufrufen, durchsuchen, filtern und archivieren.
Informationen zu den Kosten finden Sie unter Google Cloud Observability-Preise.
Unter Aufbewahrungsdauer von Logs finden Sie Informationen zur Logging-Aufbewahrung.
Unter Logausschlüsse finden Sie Informationen zum Deaktivieren aller Logs oder Ausschließen von Logs vom Logging.
Unter Übersicht: Routing und Speicher erfahren Sie, wie Sie Logs von Logging an Cloud Storage, BigQuery oder Pub/Sub weiterleiten.
Auf Jobprotokolle in Logging zugreifen
Wenn Sie Dataproc Metastore ausführen, wird eine Hive-Metastore-Prozessausgabe an die Google Cloud Console gestreamt.
Sie können auf Logging mit der Logging-Konsole, dem Befehl "gcloud logging" oder der Logging API zugreifen.
Console
Rufen Sie in der Google Cloud Console die Seite Cloud Logging > Logs (Log-Explorer) auf:
Wählen Sie ein vorhandenes Google Cloud-Projekt für Dataproc Metastore aus.
Wählen Sie im Menü Ressourcen die Option
Dataproc Metastore Serviceaus.Wählen Sie im Menü Alle Protokolle den gewünschten Logtyp aus.
gcloud
Die Google Cloud CLI bietet die Befehlsgruppe gcloud logging, mit der über die Befehlszeile auf die Cloud Logging API zugegriffen werden kann. Führen Sie den folgenden Befehl aus, um Ihre Logeinträge zu lesen.
gcloud logging read \
'resource.type="metastore.googleapis.com/Service"
resource.labels.location=LOCATION
resource.labels.service_id=SERVICE_ID'
REST
Folgen Sie der Anleitung zur Logging API, um Logeinträge (entries.list) mit dem APIs Explorer aufzulisten.
Dataproc Metastore-Dienst-Logs in Logging
Dataproc Metastore exportiert Anfrage- und Systemprotokolle nach Cloud Logging.
| Logtyp | Logname | logName-Abfrage |
|---|---|---|
| Logs anfordern | metastore.googleapis.com/requests | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Frequests) |
| Systemprotokolle | metastore.googleapis.com/system | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Fsystem) |