Questa guida spiega come monitorare le istanze e le pipeline di Cloud Data Fusion. Puoi visualizzare le metriche chiave nella dashboard di monitoraggio di Cloud Data Fusion. Per ulteriori aggregazioni o filtri, puoi visualizzare le metriche in Cloud Monitoring.
Prima di iniziare
Prima di iniziare a monitorare le istanze e le pipeline di Cloud Data Fusion, controlla i prezzi e assegna i ruoli richiesti.
Prezzi
L'utilizzo di Cloud Monitoring comporta addebiti. Per ulteriori informazioni, consulta la pagina Prezzi di Google Cloud Observability.
Ruoli obbligatori
Per ottenere le autorizzazioni necessarie per visualizzare le metriche, chiedi all'amministratore di concederti il ruolo IAM Visualizzatore Monitoring (roles/monitoring.viewer) sul progetto.
Per saperne di più sulla concessione dei ruoli, consulta Gestisci l'accesso a progetti, cartelle e organizzazioni.
Potresti anche riuscire a ottenere le autorizzazioni richieste tramite i ruoli personalizzati o altri ruoli predefiniti.
Monitoraggio in Cloud Data Fusion
Visualizza e filtra le metriche per le istanze e le pipeline direttamente in Cloud Data Fusion utilizzando la dashboard di monitoraggio:
Nella console Google Cloud , vai alla pagina Cloud Data Fusion.
Fai clic su Istanze, quindi sul nome dell'istanza per accedere alla pagina Dettagli istanza.
Fai clic sulla scheda Monitoraggio. Viene visualizzata una dashboard con grafici per la tua istanza e le relative pipeline.
La dashboard mostra le seguenti visualizzazioni:
- Panoramica:monitora le metriche di sistema di Cloud Data Fusion.
- Istanza:monitora tutte le istanze Cloud Data Fusion nel progetto.
- Pipeline:fornisce informazioni sulle esecuzioni e sul rendimento delle pipeline.
Per informazioni dettagliate sulle metriche in qualsiasi visualizzazione, passa il mouse sopra il widget e fai clic su Altro > Visualizza in Esplora metriche.
Widget nella dashboard di monitoraggio
Le sezioni seguenti descrivono i widget disponibili nelle visualizzazioni Panoramica, Istanza e Pipeline.
Widget della visualizzazione Panoramica
Questa tabella descrive i widget nella visualizzazione Panoramica:
| Widget | Descrizione |
|---|---|
| Integrità del servizio AppFabric | Disponibilità del servizio per AppFabric |
| Integrità dei servizi delle metriche | Disponibilità del servizio per le metriche |
| Integrità del servizio Wrangler | Disponibilità del servizio per Wrangler |
| Integrità dell'esecutore del set di dati | Disponibilità del servizio per il set di dati |
| Integrità di Pipeline Studio | Disponibilità del servizio per Pipeline Studio |
| Integrità del servizio di runtime | Disponibilità del servizio per il runtime |
| Integrità del servizio di salvataggio dei log | Disponibilità del servizio per il salvataggio dei log |
| Integrità del servizio dei metadati | Disponibilità del servizio per i metadati |
Widget della visualizzazione pipeline
Questa tabella descrive i widget nella visualizzazione Pipeline:
| Widget | Descrizione |
|---|---|
| Esecuzioni delle pipeline riuscite | Conteggio cumulativo delle esecuzioni delle pipeline riuscite. |
| Esecuzioni delle pipeline non riuscite | Conteggio cumulativo delle esecuzioni delle pipeline non riuscite. |
| Esecuzioni delle pipeline interrotte | Conteggio cumulativo delle esecuzioni delle pipeline interrotte. |
| Esecuzioni delle pipeline rifiutate | Conteggio cumulativo delle esecuzioni delle pipeline rifiutate. |
| Durata di esecuzione della pipeline riuscita | Tempo impiegato per il completamento delle esecuzioni delle pipeline riuscite. |
| Latenza di avvio della pipeline | Tempo impiegato da un'esecuzione pipeline per raggiungere lo stato "In esecuzione". |
| Latenza di provisioning Dataproc | Tempo impiegato per il provisioning del cluster Dataproc. |
| Numero di richieste API Dataproc | Conteggio cumulativo delle richieste API effettuate a Dataproc. |
| Tempo di esecuzione di anteprima riuscita | Tempo impiegato per il completamento delle esecuzioni di anteprima riuscite. |
| Anteprima delle corse | Numero di esecuzioni di anteprima. |
| Byte di pipeline letti | Conteggio cumulativo dei byte letti da una pipeline. |
| Byte di pipeline scritti | Conteggio cumulativo dei byte scritti da una pipeline. |
| Byte di pipeline con shuffling | Conteggio cumulativo dei byte rimescolati in una pipeline. |
| Record di plug-in elaborati in entrata | Conteggio cumulativo dei record che entrano in un plug-in. |
| Record di plug-in elaborati in uscita | Conteggio cumulativo dei record che escono da un plug-in. |
Widget della visualizzazione istanza
Questa tabella descrive i widget nella visualizzazione Istanza:
| Widget | Descrizione |
|---|---|
| Esecuzioni di pipeline simultanee | Numero di pipeline in esecuzione contemporaneamente. |
| Pipeline simultanee avviate | Numero di pipeline in stato di provisioning o avvio. |
| Richieste API ricevute | Conteggio cumulativo delle richieste API ricevute. |
| Numero di risposte API | Conteggio cumulativo delle risposte API inviate. |
| Numero di controlli di autorizzazione | Conteggio cumulativo dei controlli di autorizzazione. |
| Ora del controllo di autorizzazione | Latenza dei controlli di autorizzazione. |
| Numero di pipeline implementate | Numero di pipeline sottoposte a deployment. |
| Numero di bozze di pipeline | Numero di bozze di pipeline. |
| Numero di spazi dei nomi | Numero di spazi dei nomi. |
Visualizza le metriche per l'analisi avanzata in Cloud Monitoring
Per ulteriori opzioni di filtro e aggregazione, visualizza le metriche in Cloud Monitoring:
Nella console Google Cloud , vai alla pagina Esplora metriche di Cloud Monitoring.
Vai a Esplora metriche
Seleziona la risorsa monitorata Cloud Data Fusion.
Scegli una metrica.
Seleziona i filtri e l'aggregazione.
Passaggi successivi
- Per scoprire di più su filtri e metriche, consulta la panoramica delle metriche di Cloud Data Fusion.