Airflow-Logs ansehen

Cloud Composer 3 | Cloud Composer 2 | Cloud Composer 1

Auf dieser Seite wird beschrieben, wie Sie auf Apache Airflow-Logs für Cloud Composer zugreifen und diese ansehen.

Protokolltypen

Cloud Composer enthält die folgenden Airflow-Logs:

  • Streaming-Logs Diese Logs enthalten Airflow-Aufgabenprotokolle sowie Protokolle von Airflow-Komponenten Ihrer Umgebung, z. B. Airflow-Planer und ‑Worker.

    Weitere Informationen zu Cloud Logging und Cloud Monitoring für Ihre Cloud Composer-Umgebung finden Sie unter Umgebungen im Blick behalten.

  • Airflow-Aufgabenlogs im Bucket der Umgebung Diese Logs sind einzelnen DAG-Aufgaben zugeordnet. Cloud Composer speichert Dateien mit Airflow-Aufgabenlogs im Ordner /logs.

  • Cloud Composer generiert Audit-Logs, z. B. Administratoraktivitätslogs. Weitere Informationen finden Sie unter Audit-Logs ansehen.

Hinweis

  • Ihrem Google-Konto muss eine Rolle zugewiesen sein, mit der Objekte in Umgebungs-Buckets aufgerufen werden können. Weitere Informationen finden Sie unter Zugriffssteuerung.

  • Für Protokolle, die im Bucket der Umgebung gespeichert werden, gilt die Bucket-Richtlinie. Cloud Composer erstellt Buckets mit der Standardrichtlinie, die Daten unbegrenzt aufbewahrt. Für in Cloud Logging gespeicherte Logs verwendet Cloud Composer _Default und benutzerdefinierte Aufbewahrungsdauern für Protokolle.

  • Zur Vermeidung von Datenverlusten werden Logs, die im Bucket der Umgebung gespeichert sind, nicht gelöscht, nachdem Sie die Umgebung gelöscht haben. Sie müssen Logs manuell aus dem Bucket Ihrer Umgebung löschen.

Streaming-Logs ansehen

So rufen Sie Streaming-Logs in Cloud Logging auf:

Console

  1. Rufen Sie in der Google Cloud Console die Seite Umgebungen auf.

    Zur Seite Umgebungen

  2. Klicken Sie in der Liste der Umgebungen auf den Namen Ihrer Umgebung. Die Seite Umgebungsdetails wird geöffnet.

  3. Rufen Sie den Tab Protokolle auf.

Streaming-Logs in Cloud Logging ansehen

So rufen Sie Streaming-Logs in Cloud Logging auf:

Console

  1. Rufen Sie in der Google Cloud Console die Seite Umgebungen auf.

    Zur Seite Umgebungen

  2. Suchen Sie in der Liste der Umgebungen nach Ihrer Umgebung.

  3. Klicken Sie in der Spalte Protokolle auf den Link Protokolle.

Airflow-Aufgabenlogs im Bucket der Umgebung aufrufen

So rufen Sie Airflow-Aufgabenprotokolle im Bucket Ihrer Umgebung auf:

Console

  1. Rufen Sie in der Google Cloud Console die Seite Umgebungen auf.

    Zur Seite Umgebungen

  2. Suchen Sie in der Liste der Umgebungen nach einer Zeile mit dem Namen Ihrer Umgebung und klicken Sie in der Spalte DAGs-Ordner auf den Link DAGs. Die Seite Bucket-Details wird geöffnet.

  3. Klicken Sie im Bereich Ordnerbrowser auf /logs.

Nächste Schritte