Sie können Dataproc Metastore-Joblogs in Cloud Logging aufrufen, durchsuchen, filtern und archivieren.
Informationen zu den Kosten finden Sie unter Google Cloud-Preise für die Beobachtbarkeit.
Unter Aufbewahrungsdauer von Logs finden Sie Informationen zur Logging-Aufbewahrung.
Unter Logausschlüsse finden Sie Informationen zum Deaktivieren aller Logs oder Ausschließen von Logs vom Logging.
Unter Übersicht: Routing und Speicher erfahren Sie, wie Sie Logs von Logging an Cloud Storage, BigQuery oder Pub/Sub weiterleiten.
Auf Joblogs in Logging zugreifen
Wenn Sie Dataproc Metastore ausführen, wird die Ausgabe eines Hive-Metastore-Prozesses in die Google Cloud Console gestreamt.
Sie können auf Logging mit der Logging-Konsole, dem Befehl "gcloud logging" oder der Logging API zugreifen.
Console
Rufen Sie in der Google Cloud Console die Seite Cloud Logging > Logs (Log-Explorer) auf:
Wählen Sie ein vorhandenes Google Cloud-Projekt in Dataproc Metastore aus.
Wählen Sie im Menü Ressourcen die Option
Dataproc Metastore Serviceaus.Wählen Sie im Menü Alle Logs den Logtyp aus, den Sie sehen möchten.
gcloud
Die Google Cloud CLI bietet die Befehlsgruppe gcloud logging, die eine Befehlszeile für die Cloud Logging API bereitstellt. Führen Sie den folgenden Befehl aus, um Ihre Logeinträge zu lesen.
gcloud logging read \
'resource.type="metastore.googleapis.com/Service"
resource.labels.location=LOCATION
resource.labels.service_id=SERVICE_ID'
REST
Folgen Sie der Anleitung zur Logging API, um Logeinträge (entries.list) mit dem APIs Explorer aufzulisten.
Dataproc Metastore-Dienstlogs in Logging
Dataproc Metastore exportiert Anfrage- und Systemlogs in Cloud Logging.
| Logtyp | Logname | logName-Abfrage |
|---|---|---|
| Logs anfordern | metastore.googleapis.com/requests | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Frequests) |
| Systemprotokolle | metastore.googleapis.com/system | logName=(projects/$PROJECT_ID/logs/metastore.googleapis.com%2Fsystem) |