Crea dashboard, grafici e avvisi
Questo documento descrive come creare grafici e avvisi per monitorare le risorse BigQuery utilizzando Cloud Monitoring.
Prima di iniziare
Prima di utilizzare Cloud Monitoring, assicurati di disporre di quanto segue:
- Un account di fatturazione Cloud.
- Un progetto BigQuery con la fatturazione abilitata.
Un modo per assicurarti di avere entrambi è completare la guida rapida all'utilizzo della console Google Cloud.
Visualizza e crea dashboard, grafici e avvisi
Visualizza la dashboard di Cloud Monitoring
Per utilizzare Cloud Monitoring per monitorare il progetto BigQuery:
Nella console Google Cloud, vai alla pagina Monitoring.
Seleziona il nome del progetto se non è già selezionato nella parte superiore di della pagina.
Per visualizzare le risorse BigQuery, seleziona Dashboard > BigQuery. In questa pagina viene visualizzato un elenco di tabelle, eventi e report sugli incidenti configurabili dall'utente, nonché grafici delle metriche del progetto o del set di dati.
Visualizzare gli slot disponibili e quelli allocati
Per visualizzare gli slot disponibili e gli slot allocati al tuo progetto, vai alla dashboard per BigQuery descritta in Visualizzazione della dashboard di Cloud Monitoring:
Nella console Google Cloud, vai alla pagina Monitoring.
Seleziona Dashboard > BigQuery.
Nella dashboard di Cloud Monitoring per BigQuery, scorri fino al grafico Utilizzo degli slot.
Il grafico sull'utilizzo degli slot viene visualizzato sia nella piattaforma Cloud Monitoring la dashboard predefinita e la dashboard di Cloud Monitoring in BigQuery.
crea una dashboard e un grafico
Visualizza le metriche raccolte da Cloud Monitoring nei tuoi grafici e nelle tue dashboard:
Nella console Google Cloud, vai alla pagina Monitoring.
Seleziona Dashboard > Crea dashboard.
Fai clic su Aggiungi grafico. Viene visualizzata la pagina Aggiungi grafico:
Nei campi del riquadro Trova tipo di risorsa e metrica:
- Nell'elenco a discesa Tipo di risorsa, seleziona Globale. Potrebbe essere necessario espandere l'elenco dei tipi di risorse affinché l'opzione Globale sia visibile.
- Nell'elenco a discesa Metrica, seleziona Tempo di esecuzione della query.
I campi del riquadro Aggregazione controllano la modalità di visualizzazione dei dati relativi al tempo di esecuzione. Puoi modificare le impostazioni predefinite per questi campi.
Fai clic su Salva.
Visualizzare l'utilizzo e i limiti delle quote
In Cloud Monitoring puoi visualizzare le metriche per l'utilizzo e i limiti delle quote:
Nella console Google Cloud, vai alla pagina Monitoring.
Nel riquadro di navigazione, seleziona
Esplora metriche.Nella barra degli strumenti, seleziona Explorer > Configurazione.
Nella sezione Risorsa e metrica, fai clic su Seleziona una metrica.
Seleziona Quota consumer > Quota > Limite quota, quindi fai clic su Applica.
Fai clic su Aggiungi filtro, quindi seleziona limit_name nel menu Etichetta.
Nel menu Valore, seleziona la quota per la quale vuoi visualizzare le metriche.
Crea un avviso
Per creare un criterio di avviso che si attiva quando il 99° percentile del tempo di esecuzione di una query BigQuery supera un limite definito dall'utente, utilizza le impostazioni seguenti.
| Campo Nuova condizione |
Valore |
|---|---|
| Risorsa e metrica | Nel menu Risorse, seleziona Progetto BigQuery. Nel menu Categorie di metriche, seleziona Query. Nel menu Metriche, seleziona Tempi di esecuzione delle query. |
| Filtro | |
| Tra serie temporali Raggruppa serie temporali per |
priority |
| Nelle serie temporali Aggregazione di serie temporali |
99th percentile |
| Finestra temporale continua | 5 m |
| Funzione finestra temporale continua | sum |
| Campo Configura trigger di avviso |
Valore |
|---|---|
| Tipo di condizione | Threshold |
| Trigger di avviso | Any time series violates |
| Posizione soglia | Above threshold |
| Valore soglia | Sei tu a stabilire questo valore; tuttavia, è consigliata una soglia di 60 secondi. |
| Finestra di ripetizione test | most recent value |
Metriche disponibili per la visualizzazione
Sono disponibili le seguenti metriche, con un ritardo fino a diverse ore.
| Tipo di risorsa | Nome | Unità | Descrizione |
|---|---|---|---|
| BigQuery | Scanned bytes |
Byte al minuto | Numero di byte analizzati. |
| BigQuery | Scanned bytes billed |
Byte al minuto | Numero di byte inviati per la fatturazione quando si utilizza il modello di analisi on demand. I byte scansionati e i byte scansionati fatturati possono variare in quanto gli addebiti vengono arrotondati per eccesso. con una quantità minima di dati elaborati per query. |
| BigQuery | BI Engine Query Fallback Count (Preview) |
Query | La quantità di query che non hanno utilizzato BI Engine come frequenza. Puoi impostare l'opzione Raggruppa per su reason per separare il conteggio per diversi motivi di fallback, tra cui:
|
| BigQuery | Query count |
Query | Query nel periodo di pubblicazione. |
| BigQuery | Query execution count (Preview) |
Query | Il numero di query eseguite. |
| BigQuery |
Query execution times
|
Secondi | Tempi di esecuzione delle query non memorizzati nella cache. |
| BigQuery | Slots used by project |
Slot | Numero di slot BigQuery allocati per i job di query nel progetto.
Gli slot vengono allocati per account di fatturazione e più progetti possono condividere la stessa prenotazione di slot. |
| BigQuery | Slots used by project and job type |
Slot | Numero di slot allocati al progetto in qualsiasi momento, separati per
tipo di job.
Questo può essere considerato anche come il numero di slot utilizzati dal progetto. I job di caricamento ed esportazione sono operazioni gratuite e vengono eseguiti
in un pool pubblico di risorse.
Gli slot vengono allocati per account di fatturazione e più progetti possono condividere la stessa prenotazione di slot. |
| BigQuery | Slots used by project, reservation, and job type |
Slot | Numero di slot BigQuery allocati per il progetto. L'allocazione degli slot può essere suddivisa in base alla prenotazione e al tipo di lavoro. |
| BigQuery | Total slots |
Slot | Numero totale di slot disponibili per il progetto.
Se il progetto condivide una prenotazione di slot con altri progetti, gli slot usati dagli altri progetti non sono rappresentati. |
| BigQuery | Slots used across projects in reservations |
Slot | Numero di slot BigQuery allocati ai progetti nella prenotazione. Tieni presente che i dati delle metriche vengono registrati solo quando almeno un progetto è stato assegnato alla prenotazione e sta utilizzando gli slot. In alternativa, puoi eseguire query sulle informazioni sulle prenotazioni da INFORMATION_SCHEMA.
|
| BigQuery | Slots used by project in reservation |
Slot | Numero di slot BigQuery allocati per il progetto nella prenotazione. |
| Set di dati BigQuery | Stored bytes |
Byte | Byte archiviati nel set di dati: per le 100 tabelle più grandi nel set di dati, i byte archiviati vengono visualizzati per ogni singola tabella (per nome). Qualsiasi le tabelle aggiuntive nel set di dati (oltre le 100 più grandi) sono riportate come somma singola e il nome della tabella per il riepilogo è una stringa vuota. |
| Set di dati BigQuery | Table count |
Tabelle | Numero di tabelle nel set di dati. |
| Set di dati BigQuery | Uploaded bytes |
Byte al minuto | Numero di byte caricati in qualsiasi tabella nel set di dati. |
| Set di dati BigQuery | Righe caricate | Righe al minuto | Numero di record caricati in qualsiasi tabella nel set di dati depot/google3/cloud/pulse/ingestion_schema/repository/bigquery_googleapis_com/metrics/aliased_metrics.gcl |
Per un elenco completo delle metriche di Google Cloud disponibili, consulta Metriche di Google Cloud.
Problemi noti
Se non sono in esecuzione query, non vengono restituiti dati per gli slot allocati, gli slot disponibili o le eventuali variabili correlate alle query. Diminuisci lo zoom per visualizzare i dati.
Se le query sono in esecuzione sia negli Stati Uniti che nell'UE, gli slot allocati gli slot disponibili potrebbero non essere corretti.
Gli slot allocati vengono registrati come valore medio in una finestra temporale (la larghezza della finestra temporale dipende dal livello di zoom del grafico). L'aumento e la diminuzione dello zoom possono modificare il valore degli slot allocati. Zoom su una finestra temporale di Massimo 1 ora mostra i veri valori degli slot allocati. In questo intervallo per qualsiasi tempo visibile sul grafico,
avg(slots allocated) = slots allocated.I dati nei grafici di Cloud Monitoring riguardano solo il progetto selezionato.
Le metriche sono valori istantanei, campionati in un determinato momento e potrebbero non i punti dati tra gli intervalli di campionamento. Ad esempio, la metrica del conteggio dei job è campionate ogni minuto. Il valore è il numero di job in quel particolare e non il numero massimo di job nell'arco di un minuto.