In dieser Anleitung wird beschrieben, wie Sie Cloud Data Fusion-Instanzen und ‑Pipelines mit dem Cloud Data Fusion-Monitoring-Dashboard in Monitoring überwachen.
Das Cloud Data Fusion-Dashboard bietet anpassbare Ansichten wichtiger Messwerte. Wenn Sie sich diese Messwerte direkt in Monitoring ansehen, können Sie das Filtern und Aggregieren der Messwerte anpassen.
Das Dashboard enthält die folgenden Ansichten:
- Übersicht:Überwacht Cloud Data Fusion-Systemmesswerte und -Logs.
- Instanz:Überwacht alle Cloud Data Fusion-Instanzen im Projekt.
- Pipeline:Enthält Informationen zu Pipelineausführungen und zur Leistung.
Wenn Sie detaillierte Informationen zu den Messwerten in einer beliebigen Ansicht aufrufen möchten, bewegen Sie den Mauszeiger auf das Widget und klicken Sie auf Mehr > Im Metrics Explorer ansehen.
Hinweise
- Installieren Sie das Vorlagen-Dashboard in der Google Cloud -Konsole und wählen Sie die Dashboardvorlage Cloud Data Fusion Monitoring aus.
Preise
Für die Nutzung von Cloud Monitoring fallen Gebühren an. Weitere Informationen finden Sie unter Google Cloud Observability-Preise.
Erforderliche Rollen
Bitten Sie Ihren Administrator, Ihnen die IAM-Rolle Monitoring-Betrachter (roles/monitoring.viewer
) für Ihr Projekt zuzuweisen, um die Berechtigungen zu erhalten, die Sie zum Aufrufen von Messwerten benötigen.
Weitere Informationen zum Zuweisen von Rollen finden Sie unter Zugriff auf Projekte, Ordner und Organisationen verwalten.
Sie können die erforderlichen Berechtigungen auch über benutzerdefinierte Rollen oder andere vordefinierte Rollen erhalten.
Widgets für die Instanzansicht
In dieser Tabelle werden die Widgets in der Instanzansicht beschrieben:
Widget | Beschreibung |
---|---|
Gleichzeitig ausgeführte Pipelines | Anzahl der gleichzeitig ausgeführten Pipelines. |
Gleichzeitig gestartete Pipelines | Anzahl der Pipelines im Status „Wird bereitgestellt“ oder „Wird gestartet“. |
Empfangene API-Anfragen | Kumulative Anzahl der empfangenen API-Anfragen. |
Anzahl der API-Antworten | Kumulative Anzahl der gesendeten API-Antworten. |
Anzahl der Autorisierungsprüfungen | Kumulative Anzahl der Autorisierungsprüfungen. |
Zeit der Autorisierungsprüfungen | Latenz von Autorisierungsprüfungen. |
Anzahl der bereitgestellten Pipelines | Anzahl der bereitgestellten Pipelines. |
Anzahl der Pipelineentwürfe | Anzahl der Pipelineentwürfe. |
Anzahl der Namespaces | Anzahl der Namespaces. |
Widgets für die Pipelineansicht
In dieser Tabelle werden die Widgets in der Pipeline-Ansicht beschrieben:
Widget | Beschreibung |
---|---|
Erfolgreiche Pipelineausführungen | Kumulative Anzahl erfolgreicher Pipelineausführungen. |
Fehlgeschlagene Pipelineausführungen | Kumulative Anzahl fehlgeschlagener Pipelineausführungen. |
Beendete Pipelineausführungen | Kumulative Anzahl der beendeten Pipelineausführungen. |
Abgelehnte Pipelineausführungen | Kumulative Anzahl der abgelehnten Pipelineausführungen. |
Zeit der erfolgreichen Pipelineausführungen | Zeit, die für den Abschluss erfolgreicher Pipelineausführungen benötigt wurde. |
Latenz beim Pipelinestart | Zeit, die benötigt wird, bis eine Pipelineausführung den Status „Wird ausgeführt“ erreicht. |
Dataproc-Bereitstellungslatenz | Zeit, die zum Bereitstellen des Dataproc-Clusters benötigt wurde. |
Anzahl der Dataproc API-Anfragen | Kumulative Anzahl der API-Anfragen an Dataproc. |
Zeit der erfolgreichen Vorschauausführungen | Zeit, die für den Abschluss erfolgreicher Vorschauausführungen benötigt wurde. |
Vorschauausführungen | Anzahl der Vorschauausführungen. |
Gelesene Pipelinebytes | Kumulative Anzahl der von einer Pipeline gelesenen Byte. |
Geschriebene Pipelinebytes | Kumulative Anzahl der von einer Pipeline geschriebenen Byte. |
Nach Zufallsprinzip umverteilte Pipelinebytes | Kumulative Anzahl der in einer Pipeline gemischten Byte. |
Verarbeitete eingehende Plug‑in-Datensätze | Kumulative Anzahl der Datensätze, die in ein Plug-in eingehen. |
Verarbeitete ausgehende Plug‑in-Datensätze | Kumulative Anzahl der Datensätze, die ein Plug-in verlassen. |
Messwerte ansehen und filtern
Messwerte direkt in Monitoring ansehen und filtern:
Rufen Sie in der Google Cloud Console die Seite Metrics Explorer auf.
Wählen Sie die überwachte Ressource Cloud Data Fusion aus.
Wählen Sie einen Messwert aus.
Wählen Sie Filter und Aggregation aus.
Nächste Schritte
- Weitere Informationen zu Filtern und Messwerten finden Sie in der Übersicht über Cloud Data Fusion-Messwerte.