Mit Sammlungen den Überblick behalten
Sie können Inhalte basierend auf Ihren Einstellungen speichern und kategorisieren.
Wenn Sie Ihre Pipeline mit Dataflow ausführen, können Sie diesen und alle anderen Jobs über die Dataflow-Monitoring-Oberfläche aufrufen. Über die Monitoring-Oberfläche können Sie Ihre Dataflow-Jobs ansehen und mit ihnen interagieren.
Sie können in derGoogle Cloud consoleauf die Dataflow-Monitoring-Oberfläche zugreifen.
Über die Monitoring-Oberfläche können Sie unter anderem folgende Aufgaben ausführen:
Hier finden Sie eine Liste der aktiven, abgeschlossenen und fehlgeschlagenen Jobs.
Grafische Darstellung der Phasen eines Jobs und des Fortschritts jeder Phase ansehen
Diagramme mit Jobmesswerten wie Datenaktualität, Ressourcennutzung und E/A-Anfragen ansehen.
Geschätzte Kosten eines Jobs überwachen
Pipeline-Logs ansehen
Ermitteln, welche Schritte zu Pipelineverzögerungen führen können
Ursachen für Latenz in Ihren Quellen und Senken identifizieren
Informationen zu Pipelinefehlern
Monitoring-Schnittstellenkomponenten
Die Monitoring-Oberfläche enthält die folgenden Visualisierungen und Diagramme:
Eine Liste aller ausgeführten Dataflow-Jobs und aller Jobs, die innerhalb der letzten 30 Tage ausgeführt wurden, zusammen mit ihrem Status, ihrer Region, der verstrichenen Zeit und anderen Informationen.
Eine grafische Darstellung einer Pipeline. Die Jobgrafik enthält auch eine Jobübersicht, ein Joblog und Informationen zu jedem Schritt in der Pipeline.
[[["Leicht verständlich","easyToUnderstand","thumb-up"],["Mein Problem wurde gelöst","solvedMyProblem","thumb-up"],["Sonstiges","otherUp","thumb-up"]],[["Schwer verständlich","hardToUnderstand","thumb-down"],["Informationen oder Beispielcode falsch","incorrectInformationOrSampleCode","thumb-down"],["Benötigte Informationen/Beispiele nicht gefunden","missingTheInformationSamplesINeed","thumb-down"],["Problem mit der Übersetzung","translationIssue","thumb-down"],["Sonstiges","otherDown","thumb-down"]],["Zuletzt aktualisiert: 2025-09-04 (UTC)."],[[["\u003cp\u003eThe Dataflow monitoring interface allows users to view and interact with their Dataflow jobs directly from the Google Cloud console.\u003c/p\u003e\n"],["\u003cp\u003eUsers can track running, completed, and failed jobs, alongside a graphical representation of a job's stages and its progress.\u003c/p\u003e\n"],["\u003cp\u003eThe interface provides job metrics like data freshness, resource utilization, and estimated costs, as well as pipeline logs and potential error sources.\u003c/p\u003e\n"],["\u003cp\u003eThe monitoring interface includes a project dashboard, job list, job graph, execution details, and cost estimation, and also provides recommendations for job performance and error troubleshooting.\u003c/p\u003e\n"],["\u003cp\u003eThe monitoring interface can show data samples of each step of a pipeline.\u003c/p\u003e\n"]]],[],null,["# Use the Dataflow job monitoring interface\n\nWhen you run your pipeline by using Dataflow,\nyou can view that job and any others by using the Dataflow monitoring\ninterface. The monitoring interface lets you see and\ninteract with your Dataflow jobs.\n\nYou can access the Dataflow monitoring interface in the\n[Google Cloud console](https://console.cloud.google.com/).\n\nTasks that you can perform by using the monitoring interface include the\nfollowing:\n\n- See a list of running, completed, and failed jobs.\n- View a graphical representation of a job's stages and the progress of each stage\n- View graphs of job metrics, such as data freshness, resource utilization, and I/O requests.\n- Monitor the estimated cost of a job.\n- View pipeline logs.\n- Identify which steps might cause pipeline lag.\n- Identify causes of latency in your sources and sinks.\n- Understand pipeline errors.\n\n| **Note:** Sometimes job data is intermittently unavailable. When data is missing, gaps appear in the job monitoring charts.\n\nMonitoring interface components\n-------------------------------\n\nThe monitoring interface contains the following visualizers and charts:\n\n[Project monitoring dashboard](/dataflow/docs/guides/project-monitoring)\n: A dashboard that monitors your Dataflow jobs at the project\n level.\n\n[Jobs list](/dataflow/docs/guides/jobs-list)\n: A list of all running Dataflow jobs and all jobs run within the\n last 30 days, along with their status, region, elapsed time, and other\n information.\n\n[Job graph](/dataflow/docs/guides/job-graph)\n: A graphical representation of a pipeline. The job graph also provides a job\n summary, a job log, and information about each step in the pipeline.\n\n[Execution details](/dataflow/docs/concepts/execution-details)\n: Shows the execution stages of a job, data freshness for streaming jobs, and\n worker progress for batch jobs.\n\n[Job metrics](/dataflow/docs/guides/using-monitoring-intf)\n: Charts that display metrics over the duration of a job.\n\n[Estimated cost](/dataflow/docs/guides/estimated-cost)\n: The estimated cost of your Dataflow job, based on resource\n usage metrics.\n\n[Recommendations](/dataflow/docs/guides/recommendations)\n: Recommendations for improving job performance, reducing cost, and\n troubleshooting errors.\n\n[Autoscaling](/dataflow/docs/guides/autoscaling-metrics)\n: A set of charts that help you to understand the autoscaling behavior of\n streaming jobs.\n\n[Pipeline logs](/dataflow/docs/guides/logging)\n: Logs emitted by your pipeline and by the Dataflow service.\n\n[Data sampling](/dataflow/docs/guides/data-sampling)\n: A tool that lets you observe sampled data at each step of a pipeline.\n\nWhat's next\n-----------\n\n- Use [Cloud Monitoring](/dataflow/docs/guides/using-cloud-monitoring) to create alerts and view Dataflow metrics, including custom metrics\n- Learn more about [building production-ready data pipelines](/architecture/building-production-ready-data-pipelines-using-dataflow-monitoring)\n- Learn how to [troubleshoot your pipeline](/dataflow/docs/guides/troubleshooting-your-pipeline?)"]]
