Crea dashboard, grafici e avvisi

Questo documento descrive come creare grafici e avvisi per monitorare le risorse BigQuery utilizzando Cloud Monitoring.

Prima di iniziare

Prima di utilizzare Cloud Monitoring, assicurati di disporre di quanto segue:

Un account di fatturazione Cloud.
Un progetto BigQuery con fatturazione abilitata.

Un modo per assicurarti di avere entrambi è completare la guida rapida utilizzando la console Google Cloud.

Visualizza e crea dashboard, grafici e avvisi

Visualizza la dashboard di Cloud Monitoring

Per utilizzare Cloud Monitoring per monitorare il tuo progetto BigQuery:

Nella console Google Cloud, vai alla pagina Monitoring.
Vai a Monitoring
Seleziona il nome del progetto, se non è già selezionato nella parte superiore della pagina.
Per visualizzare le risorse BigQuery, seleziona Dashboard > BigQuery. In questa pagina viene visualizzato un elenco di tabelle, eventi e report sugli incidenti configurabili dall'utente, nonché grafici delle metriche di progetto o del set di dati.

Visualizza gli slot disponibili e quelli allocati

Per visualizzare gli slot disponibili e gli slot assegnati al tuo progetto, vai alla dashboard per BigQuery descritta in Visualizzazione della dashboard di Cloud Monitoring:

Nella console Google Cloud, vai alla pagina Monitoring.
Vai a Monitoring
Seleziona Dashboard > BigQuery.
Nella dashboard di Cloud Monitoring per BigQuery, scorri fino al grafico denominato Utilizzo slot.

Il grafico Utilizzo slot viene visualizzato sia nella dashboard principale predefinita di Cloud Monitoring sia nella dashboard di Cloud Monitoring per BigQuery.

crea una dashboard e un grafico

Visualizza le metriche raccolte da Cloud Monitoring nei tuoi grafici e dashboard:

Nella console Google Cloud, vai alla pagina Monitoring.
Vai a Monitoring
Seleziona Dashboard > Crea dashboard.
Fai clic su Aggiungi grafico. Viene visualizzata la pagina Aggiungi grafico:
Nei campi del riquadro Find resource type and metric (Trova tipo di risorsa e metrica):
- Nell'elenco a discesa Tipo di risorsa, seleziona Globale. Potrebbe essere necessario espandere l'elenco dei Tipi di risorse affinché l'opzione Globale sia visibile.
- Nell'elenco a discesa Metrica, seleziona Tempo di esecuzione della query.
I campi del riquadro Aggregazione controllano il modo in cui vengono visualizzati i dati del tempo di esecuzione. Puoi modificare le impostazioni predefinite per questi campi.
Fai clic su Salva.

Visualizza l'utilizzo e i limiti della quota

In Cloud Monitoring puoi visualizzare le metriche relative all'utilizzo e ai limiti delle quote:

Nella console Google Cloud, vai alla pagina Monitoring.
Vai a Monitoring
Nel riquadro di navigazione, seleziona Metrics Explorer.
Nella barra degli strumenti, seleziona Explorer > Configurazione.
Nella sezione Risorse e metriche, fai clic su Seleziona una metrica.
Seleziona Quota consumer > Quota > Limite quota e fai clic su Applica.
Fai clic su Aggiungi filtro e poi nel menu Etichetta seleziona limit_name.
Nel menu Valore, seleziona la quota per cui vuoi visualizzare le metriche.

Crea un avviso

Per creare un criterio di avviso che si attivi quando il 99° percentile del tempo di esecuzione di una query BigQuery supera un limite definito dall'utente, utilizza le impostazioni seguenti.

Passaggi per creare un criterio di avviso.

Per creare un criterio di avviso, segui questi passaggi:

Nel pannello di navigazione della console Google Cloud, seleziona Monitoring e poi Avvisi:
Vai ad Avvisi
Se non hai creato i canali di notifica e vuoi ricevere notifiche, fai clic su Modifica canali di notifica e aggiungi i tuoi canali di notifica. Torna alla pagina Avvisi dopo aver aggiunto i tuoi canali.
Nella pagina Avvisi, seleziona Crea criterio.
Per selezionare la risorsa, la metrica e i filtri, espandi il menu Seleziona una metrica e utilizza i valori nella tabella Nuova condizione:
1. (Facoltativo) Per limitare il menu alle voci pertinenti, inserisci il nome della risorsa o della metrica nella barra dei filtri.
2. Seleziona un Tipo di risorsa. Ad esempio, seleziona Istanza VM.
3. Seleziona una Categoria di metrica. Ad esempio, seleziona instance.
4. Seleziona una metrica. Ad esempio, seleziona Utilizzo CPU.
5. Seleziona Applica.
Fai clic su Avanti e configura l'attivatore del criterio di avviso. Per completare questi campi, utilizza i valori nella tabella Configura attivatore di avviso.
Tocca Avanti.
(Facoltativo) Per aggiungere notifiche al criterio di avviso, fai clic su Canali di notifica. Nella finestra di dialogo, seleziona uno o più canali di notifica dal menu, quindi fai clic su OK.

Per ricevere una notifica quando gli incidenti sono aperti e chiusi, seleziona Notifica chiusura degli incidenti. Per impostazione predefinita, le notifiche vengono inviate solo quando gli incidenti sono aperti.
(Facoltativo) Aggiorna la Durata chiusura automatica degli incidenti. Questo campo determina quando Monitoring chiude gli incidenti in assenza di dati delle metriche.
(Facoltativo) Fai clic su Documentazione, quindi aggiungi le informazioni che vuoi includere in un messaggio di notifica.
Fai clic su Nome avviso e inserisci un nome per il criterio di avviso.
Fai clic su Crea criterio.

Nuova condizione Campo	Valore
Risorse e metriche	Nel menu Risorse, seleziona Progetto BigQuery. Nel menu Categorie di metriche, seleziona Query. Nel menu Metriche, seleziona Tempi di esecuzione delle query.
Filtro
In tutte le serie temporali Raggruppa per serie temporali	`priority`
In tutte le serie temporali Aggregazione di serie temporali	`99th percentile`
Finestra temporale continua	`5 m`
Funzione finestra temporale continua	`sum`

Configura attivatore di avviso Campo	Valore
Tipo di condizione	`Threshold`
Attivatore di avviso	`Any time series violates`
Posizione soglia	`Above threshold`
Valore soglia	Sei tu a stabilire questo valore, ma è consigliata una soglia di 60 secondi.
Finestra di nuovo test	`most recent value`

Metriche disponibili per la visualizzazione

Sono disponibili le seguenti metriche, con un ritardo fino a diverse ore.

Tipo di risorsa	Nome	Unità	Description
BigQuery	Scanned bytes	Byte al minuto	Numero di byte analizzati.
BigQuery	Scanned bytes billed	Byte al minuto	Numero di byte inviati per la fatturazione quando si utilizza il modello di analisi on demand. I byte analizzati e i byte analizzati fatturati possono variare man mano che gli addebiti vengono arrotondati per eccesso, con una quantità minima di dati elaborati per query.
BigQuery	BI Engine Query Fallback Count (Preview)	Query	Il numero di query che non hanno utilizzato BI Engine come tariffa. Puoi impostare l'opzione Raggruppa per su `reason` per separare il conteggio in diversi motivi di fallback, tra cui: `NO_RESERVATION` `INSUFFICIENT_RESERVATION` `UNSUPPORTED_SQL_TEXT` `INPUT_TOO_LARGE` `OTHER_REASON`
BigQuery	Query count	Query	Query in corso.
BigQuery	Query execution count (Preview)	Query	Il numero di query eseguite.
BigQuery	Query execution times - 5th percentile - 50th percentile - 95th percentile - 99th percentile	Secondi	Tempi di esecuzione delle query non memorizzate nella cache.
BigQuery	Slots used by project	Slot	Numero di slot BigQuery allocati per i job di query nel progetto. Gli slot vengono allocati per account di fatturazione e più progetti possono condividere la stessa prenotazione di slot.
BigQuery	Slots used by project and job type	Slot	Numero di slot assegnati al progetto in qualsiasi momento separati dal tipo di job. Può essere considerato anche il numero di slot utilizzati dal progetto. I job di caricamento ed esportazione sono operazioni gratuite e vengono eseguiti in un pool di risorse pubblico. Gli slot vengono allocati per account di fatturazione e più progetti possono condividere la stessa prenotazione di slot.
BigQuery	Slots used by project, reservation, and job type	Slot	Numero di slot BigQuery allocati per il progetto. L'allocazione degli slot può essere suddivisa in base alla prenotazione e al tipo di job.
BigQuery	Total slots	Slot	Numero totale di slot disponibili per il progetto. Se il progetto condivide una prenotazione di slot con altri progetti, gli slot utilizzati dagli altri progetti non vengono visualizzati.
BigQuery	Slots used across projects in reservations	Slot	Numero di slot BigQuery allocati tra i progetti nella prenotazione. Tieni presente che i dati delle metriche vengono riportati solo mentre almeno un progetto è stato assegnato alla prenotazione e utilizza gli slot. In alternativa, puoi eseguire query sulle informazioni sulle prenotazioni da `INFORMATION_SCHEMA`.
BigQuery	Slots used by project in reservation	Slot	Numero di slot BigQuery allocati per il progetto nella prenotazione.
Set di dati BigQuery	Stored bytes	Byte	Byte archiviati nel set di dati - Per le 100 tabelle più grandi nel set di dati, vengono visualizzati i byte archiviati per ogni singola tabella (per nome). Eventuali tabelle aggiuntive nel set di dati (oltre le 100 più grandi) vengono segnalate come somma singola e il nome della tabella per il riepilogo è una stringa vuota.
Set di dati BigQuery	Table count	Tables	Numero di tabelle nel set di dati.
Set di dati BigQuery	Uploaded bytes	Byte al minuto	Numero di byte caricati in qualsiasi tabella del set di dati.
Set di dati BigQuery	Righe caricate	Righe al minuto	Numero di record caricati in qualsiasi tabella del set di dati.

Per un elenco completo delle metriche di Google Cloud disponibili, consulta l'articolo sulle metriche di Google Cloud.

Problemi noti

Se non sono in esecuzione query, non vengono restituiti dati per gli slot allocati, gli slot disponibili o eventuali variabili relative alle query. Diminuisci lo zoom per vedere i dati.
Se le query vengono eseguite sia negli Stati Uniti che nell'UE, gli slot assegnati e gli slot disponibili potrebbero non essere corretti.
Le aree allocate sono riportate come valore medio in una finestra temporale (la larghezza dell'intervallo temporale dipende dal livello di zoom del grafico). Aumentando e diminuendo lo zoom, il valore degli slot assegnati. Se aumenti lo zoom su una finestra temporale di massimo 1 ora, vengono mostrati i valori reali degli slot allocati. In questo intervallo per qualsiasi momento visibile nel grafico, avg(slots allocated) = slots allocated.
I dati nei grafici di Cloud Monitoring sono relativi solo al progetto selezionato.
Le metriche sono valori istantanei, campionati in un determinato momento e potrebbero mancare punti dati tra gli intervalli di campionamento. Ad esempio, la metrica del conteggio dei job viene campionata ogni minuto. Il valore è il numero di job in quel particolare momento, non il numero massimo di job nell'intero minuto.