Dashboards, Diagramme und Benachrichtigungen erstellen

In diesem Dokument wird beschrieben, wie mit Cloud Monitoring Diagramme und Benachrichtigungen zum Monitoring von BigQuery-Ressourcen erstellt werden.

Hinweis

Für die Verwendung von Monitoring benötigen Sie Folgendes:

• Ein Cloud-Rechnungskonto
• Ein BigQuery-Projekt mit aktivierter Abrechnungsfunktion

Wenn Sie die Kurzanleitung zur Verwendung der Google Cloud Console abschließen, haben Sie beides.

Dashboards, Diagramme und Benachrichtigungen ansehen und erstellen

Cloud Monitoring-Dashboard aufrufen

So verwenden Sie Cloud Monitoring zur Überwachung Ihres BigQuery-Projekts:

1. Rufen Sie in der Google Cloud Console die Seite Monitoring auf.

   Zu Monitoring

2. Wählen Sie den Namen Ihres Projekts aus, wenn er nicht bereits oben auf der Seite ausgewählt ist.

3. Die BigQuery-Ressourcen rufen Sie mit Dashboards > BigQuery auf. Auf der eingeblendeten Seite finden Sie eine Liste von konfigurierbaren Tabellen, Ereignissen und Vorfallberichten sowie Diagramme von Projekt- oder Dataset-Messwerten.

   

Verfügbare und zugewiesene Slots visualisieren

Zum Visualisieren der verfügbaren und Ihrem Projekt zugewiesenen Slots rufen Sie das Dashboard für BigQuery auf, das unter Cloud Monitoring-Dashboard aufrufen beschrieben wird:

1. Rufen Sie in der Google Cloud Console die Seite Monitoring auf.

   Zu Monitoring

2. Wählen Sie Dashboards > BigQuery aus.

3. Scrollen Sie im Cloud Monitoring-Dashboard für BigQuery zum Diagramm Slot-Nutzung.

Das Diagramm Slot-Nutzung wird sowohl auf dem standardmäßigen Cloud Monitoring-Haupt-Dashboard als auch auf dem Cloud Monitoring-Dashboard für BigQuery eingeblendet.

Dashboard und Diagramm erstellen

Stellen Sie die von Cloud Monitoring erfassten Messwerte in eigenen Diagrammen und Dashboards dar:

1. Rufen Sie in der Google Cloud Console die Seite Monitoring auf.

   Zu Monitoring

2. Wählen Sie Dashboards > Dashboard erstellen aus.

3. Klicken Sie auf Diagramm hinzufügen. Die Seite „Diagramm hinzufügen“ wird angezeigt:

   

4. Wählen Sie in den Feldern Ressourcentyp und Messwert suchen Folgendes aus:

   • Wählen Sie für die Drop-down-Liste Ressourcentyp die Option Global aus. Unter Umständen müssen Sie die Liste Ressourcentypen erweitern, damit die Option Global angezeigt wird.
   • Wählen Sie für die Drop-down-Liste Messwert die Option Ausführungszeit der Abfrage aus.

5. In den Feldern des Bereichs Aggregation legen Sie fest, wie die Ausführungszeiten angezeigt werden. Sie können die Standardeinstellungen für diese Felder ändern.

6. Klicken Sie auf Speichern.

Kontingentnutzung und -limits aufrufen

In Cloud Monitoring können Sie Messwerte für die Kontingentnutzung und -limits aufrufen:

1. Rufen Sie in der Google Cloud Console die Seite Monitoring auf.

   Zu Monitoring

2. Wählen Sie im Navigationsbereich Metrics Explorer aus.

3. Wählen Sie in der Symbolleiste Explorer > Konfiguration aus.

4. Klicken Sie im Abschnitt Ressource und Messwert auf Messwert auswählen.

5. Wählen Sie Nutzerkontingent > Kontingent > Kontingentlimit aus und klicken Sie dann auf Übernehmen.

6. Klicken Sie auf Filter hinzufügen und wählen Sie im Menü Label die Option limit_name aus.

7. Wählen Sie im Menü Wert das Kontingent aus, für das Sie die Messwerte aufrufen möchten.

   

Hinweis: Sie können Messwerte für Kontingentnutzung und Limits ausschließlich für Nebenläufige BigQuery Storage Write API-Verbindungen und Durchsatzkontingente aufrufen.

Benachrichtigung erstellen

Verwenden Sie die folgenden Einstellungen, um eine Benachrichtigungsrichtlinie zu erstellen, die Sie benachrichtigt, wenn das 99. Perzentil der Ausführungszeit einer BigQuery-Anfrage einen benutzerdefinierten Grenzwert überschreitet:

Schritte zum Erstellen einer Benachrichtigungsrichtlinie

So erstellen Sie eine Benachrichtigungsrichtlinie:

1. Rufen Sie in der Google Cloud Console die Seite  Benachrichtigungen auf:

   Zu Benachrichtigungen

   Wenn Sie diese Seite über die Suchleiste suchen, wählen Sie das Ergebnis aus, dessen Zwischenüberschrift Monitoring ist.

2. Wenn Sie keine Benachrichtigungskanäle erstellt haben und Benachrichtigungen erhalten möchten, klicken Sie auf Benachrichtigungskanäle bearbeiten und fügen Sie Benachrichtigungskanäle hinzu. Kehren Sie nach dem Hinzufügen der Kanäle zur Seite Benachrichtigungen zurück.
3. Klicken Sie auf der Seite Benachrichtigungen auf Richtlinie erstellen.
4. Wenn Sie die Ressource, den Messwert und die Filter auswählen möchten, erweitern Sie das Menü Messwert auswählen und verwenden Sie die Werte in der Tabelle Neue Bedingung:
   1. Optional: Geben Sie den Ressourcen- oder Messwertnamen in die Filterleiste ein, um das Menü auf relevante Einträge zu beschränken.
   2. Wählen Sie einen Ressourcentyp aus. Wählen Sie beispielsweise VM-Instanz aus.
   3. Wählen Sie eine Messwertkategorie aus. Wählen Sie beispielsweise Instanz aus.
   4. Wählen Sie einen Messwert aus. Wählen Sie beispielsweise CPU-Auslastung aus.
   5. Klicken Sie auf Apply (Anwenden).
5. Klicken Sie auf Weiter und konfigurieren Sie den Benachrichtigungsrichtlinien-Trigger. Verwenden Sie zum Ausfüllen dieser Felder die Werte in der Tabelle Benachrichtigungstrigger konfigurieren.
6. Klicken Sie auf Weiter.

7. Optional: Klicken Sie auf Benachrichtigungskanäle, um Benachrichtigungen zu Ihrer Benachrichtigungsrichtlinie hinzuzufügen. Wählen Sie im Dialogfeld einen oder mehrere Benachrichtigungskanäle aus dem Menü aus und klicken Sie dann auf OK.

   Optional: Wenn Sie benachrichtigt werden möchten, wenn Vorfälle geöffnet und geschlossen werden, klicken Sie auf das Kästchen Bei Schließen von Vorfall benachrichtigen. Standardmäßig werden Benachrichtigungen nur gesendet, wenn Vorfälle geöffnet werden.

8. Optional: Aktualisieren Sie die Dauer bis zur automatischen Schließung von Vorfällen. Dieses Feld bestimmt, wann Monitoring Vorfälle ohne Messwertdaten schließt.
9. Optional: Klicken Sie auf Dokumentation und geben Sie alle Informationen ein, die in einer Benachrichtigung angezeigt werden sollen.
10. Klicken Sie auf Name der Benachrichtigung und geben Sie einen Namen für die Benachrichtigungsrichtlinie ein.
11. Klicken Sie auf Richtlinie erstellen.

Neue Bedingung Feld	Wert
Ressource und Messwert	Wählen Sie im Menü Ressourcen die Option BigQuery-Projekt aus. Wählen Sie im Menü Messwertkategorien die Option Abfrage aus. Wählen Sie im Menü Messwerte die Option Ausführungszeiten für Abfragen aus.
Filter
Über Zeitreihen Zeitreihen gruppieren nach	priority
Über Zeitreihen hinweg Zeitreihenaggregation	99th percentile
Rollierendes Zeitfenster	5 m
Funktion für rollierendes Zeitfenster	sum

Benachrichtigungstrigger konfigurieren Feld	Wert
Bedingungstyp	Threshold
Benachrichtigungstrigger	Any time series violates
Grenzwertposition	Above threshold
Grenzwert	Sie legen diesen Wert fest. Wir empfehlen jedoch einen Grenzwert von 60 Sekunden.
Zeitfenster noch einmal testen	most recent value

Messwerte, die visualisiert werden können

Folgende Messwerte sind verfügbar, bis zu mehreren Stunden zeitversetzt.

Ressourcentyp	Name	Einheiten	Beschreibung
BigQuery	Scanned bytes	Byte pro Minute	Anzahl gescannter Byte.
BigQuery	Scanned bytes billed	Byte pro Minute	Anzahl der zur Abrechnung gesendeten Byte bei Verwendung des On-Demand-Analysemodells. Die Anzahl der gescannten Byte und die Anzahl der gescannten in Rechnung gestellten Byte kann sich unterscheiden, da die Gebühren aufgerundet werden, wobei eine Mindestmenge an verarbeiteten Daten pro Abfrage gilt.
BigQuery	BI Engine Query Fallback Count (Preview)	Abfragen	Die Anzahl der Abfragen, die BI Engine nicht als Rate verwendet haben. Sie können die Option Gruppieren nach auf reason festlegen, um die Anzahl in verschiedene Fallback-Gründe zu unterteilen, einschließlich: NO_RESERVATION INSUFFICIENT_RESERVATION UNSUPPORTED_SQL_TEXT INPUT_TOO_LARGE OTHER_REASON
BigQuery	Query count	Abfragen	Abfragen während der Bearbeitung.
BigQuery	Query execution count (Preview)	Abfragen	Die Anzahl der ausgeführten Abfragen.
BigQuery	Query execution times - 5th percentile - 50th percentile - 95th percentile - 99th percentile	Sekunden	Nicht im Cache gespeicherte Abfrageausführungszeiten.
BigQuery	Slots used by project	Slots	Anzahl der BigQuery-Slots, die für Abfragejobs im Projekt zugewiesen sind. Slots werden pro Abrechnungskonto vergeben; mehrere Projekte können die gleiche Reservierung von Slots teilen.
BigQuery	Slots used by project and job type	Slots	Anzahl der Slots, die dem Projekt zu jeder Zeit zugewiesen sind, nach Jobtyp getrennt. Dies entspricht auch der Anzahl der von diesem Projekt genutzten Slots. Lade- und Exportjobs sind kostenlose Vorgänge, die in einem öffentlichen Ressourcenpool ausgeführt werden. Slots werden pro Abrechnungskonto vergeben; mehrere Projekte können die gleiche Reservierung von Slots teilen.
BigQuery	Slots used by project, reservation, and job type	Slots	Anzahl der dem Projekt zugewiesenen BigQuery-Slots. Die Slotzuweisung kann nach Reservierung und Jobtyp aufgeschlüsselt werden.
BigQuery	Total slots	Slots	Gesamtzahl der für das Projekt verfügbaren Slots. Wenn das Projekt eine Slotreservierung mit anderen Projekten teilt, werden die Slots, die von den anderen Projekten verwendet werden, nicht dargestellt.
BigQuery	Slots used across projects in reservations	Slots	Anzahl der BigQuery-Slots, die Projekten in der Reservierung zugewiesen sind. Beachten Sie, dass die Messwertdaten nur gemeldet werden, während der Reservierung mindestens ein Projekt zugewiesen wurde und Slots genutzt werden. Alternativ können Sie Reservierungsinformationen von INFORMATION_SCHEMA abfragen.
BigQuery	Slots used by project in reservation	Slots	Anzahl der BigQuery-Slots, die dem Projekt in der Reservierung zugewiesen sind.
BigQuery-Dataset	Stored bytes	Byte	Im Dataset gespeicherte Byte: Für die 100 größten Tabellen im Dataset werden die gespeicherten Byte für jede einzelne Tabelle (nach Name) angezeigt. Alle zusätzlichen Tabellen im Dataset (über die 100 größten hinaus) werden als einzelne Summe gemeldet und der Tabellenname für die Zusammenfassung ist eine leere Zeichenfolge.
BigQuery-Dataset	Table count	Tabellen	Anzahl der Tabellen im Dataset
BigQuery-Dataset	Uploaded bytes	Byte pro Minute	Anzahl der in eine beliebige Tabelle des Datasets hochgeladenen Byte.
BigQuery-Dataset	Hochgeladene Zeilen	Zeilen pro Minute	Anzahl der in eine beliebige Tabelle im Dataset depot/google3/cloud/pulse/ingestion_schema/repository/bigquery_googleapis_com/metrics/aliased_metrics.gcl hochgeladenen Datensätze.

Eine vollständige Liste der verfügbaren Google Cloud-Messwerte finden Sie unter Google Cloud-Messwerte.

Bekannte Probleme

• Wenn keine Abfragen ausgeführt werden, werden für zugewiesene Slots, verfügbare Slots und abfragebezogene Variablen keine Daten zurückgegeben. Verkleinern Sie die Anzeige, um Daten sehen zu können.

• Falls Abfragen sowohl in den USA als auch in der EU ausgeführt werden, können die zugewiesenen und verfügbaren Slots falsch sein.

• Zugewiesene Slots werden in einem Zeitfenster als Mittelwert gemeldet. (Die Breite des Zeitfensters hängt von der Zoomstufe des Diagramms ab). Das Vergrößern und Verkleinern kann den Wert der zugewiesenen Slots ändern. Das Vergrößern des Zeitfensters auf 1 Std. oder weniger zeigt den tatsächlichen Wert der zugewiesenen Slots. In diesem Bereich bedeutet jede auf dem Diagramm sichtbare Zeitangabe avg(slots allocated) = slots allocated.

• Die Daten in den Cloud Monitoring-Diagrammen betreffen nur das ausgewählte Projekt.

• Messwerte sind sofortige Werte, die als Stichproben zu einem bestimmten Zeitpunkt abgerufen werden und Datenpunkte zwischen Stichprobenintervallen verpassen können. Beispielsweise wird der Messwert für die Jobanzahl jede Minute erfasst. Der Wert entspricht der Anzahl der Jobs zu einem bestimmten Zeitpunkt, nicht der maximalen Anzahl von Jobs innerhalb der gesamten Minute.