Panoramica delle metriche

Anteprima

Questo prodotto o questa funzionalità sono soggetti ai "Termini dell'offerta pre-GA" nella sezione Termini di servizio generali dei Termini specifici dei servizi. I prodotti e le funzionalità pre-GA sono disponibili "così come sono" e potrebbero avere un supporto limitato. Per saperne di più, consulta le descrizioni della fase di lancio.

Questa pagina descrive le metriche che ti aiutano a monitorare l'integrità e le prestazioni delle tue istanze e pipeline Cloud Data Fusion. Utilizza Cloud Monitoring per monitorare queste metriche. Le metriche forniscono informazioni sulle esecuzioni della pipeline, sui dettagli delle istanze, sulle richieste API e sui controlli di autorizzazione.

Le metriche sono classificate come metriche della pipeline o metriche dell'istanza:

• Le metriche della pipeline forniscono dati sulle singole esecuzioni della pipeline, ad esempio lo stato dell'esecuzione, la durata, la latenza e il throughput dei dati.
• Le metriche dell'istanza forniscono informazioni aggregate sulle pipeline all'interno di un'istanza, tra cui la disponibilità del servizio, il numero di pipeline di cui è stato eseguito il deployment e i conteggi delle richieste API.

Filtra e aggrega le metriche della pipeline e dell'istanza di Cloud Data Fusion in Monitoring utilizzando le etichette metrica e risorsa monitorata. Quando personalizzi le visualizzazioni delle metriche, puoi utilizzare uno o entrambi questi tipi di etichette.

Etichette delle risorse monitorate della pipeline Cloud Data Fusion

Filtra e aggrega le metriche con le seguenti etichette delle risorse monitorate Pipeline Cloud Data Fusion:

Nome dell'etichetta	Descrizione
resource_container	L'ID del progetto cliente.
org_id	L'ID dell'organizzazione a cui appartiene il progetto cliente.
location	La zona o la regione in cui è ospitata l'istanza.
edition	La versione dell'istanza Cloud Data Fusion.
is_private_ip_enabled	Indica se l'istanza utilizza un indirizzo IP interno.
version	La versione del data plane di Cloud Data Fusion dell'istanza.
instance_id	L'ID istanza Cloud Data Fusion.
namespace	Lo spazio dei nomi della pipeline.
pipeline_id	L'ID della pipeline.
run_id	L'ID esecuzione della pipeline.

Etichette delle metriche pipeline

Filtra e aggrega le metriche con le seguenti etichette delle metriche di Cloud Data Fusion in Monitoring:

Nome	Metrica	Descrizione	Etichette metriche
Stato esecuzione pipeline	datafusion.googleapis.com/pipeline/v2/runs_completed_count	Il conteggio cumulativo delle pipeline che hanno completato un'esecuzione.	complete_state previous_state program provisioner cluster_state compute_profile_id enable_rbac private_service_connect_enabled
Durata di esecuzione della pipeline	datafusion.googleapis.com/pipeline/v2/pipeline_duration	Tempo impiegato per completare l'esecuzione della pipeline.	complete_state program provisioner cluster_state compute_profile_id enable_rbac private_service_connect_enabled
Latenza di avvio della pipeline	datafusion.googleapis.com/pipeline/v2/pipeline_start_latency	Il tempo necessario alla pipeline per raggiungere lo stato In esecuzione.	program provisioner cluster_state compute_profile_id complete_state enable_rbac private_service_connect_enabled
Latenza di provisioning	datafusion.googleapis.com/pipeline/v2/dataproc/provisioning_latency	Latenza di provisioning del cluster Dataproc.	provisioner enable_rbac private_service_connect_enabled
Richieste API Dataproc	datafusion.googleapis.com/pipeline/v2/dataproc/api_request_count	Il conteggio cumulativo delle richieste API Dataproc.	provisioner method response_code region launch_mode image_version enable_rbac private_service_connect_enabled
Tempo di esecuzione dell'anteprima della pipeline	datafusion.googleapis.com/pipeline/v2/preview_duration	Tempo impiegato per completare l'anteprima.	complete_state enable_rbac private_service_connect_enabled
Byte di pipeline scritti	datafusion.googleapis.com/pipeline/v2/write_bytes_count	Il conteggio cumulativo dei byte scritti da una pipeline.	enable_rbac private_service_connect_enabled
Byte di pipeline letti	datafusion.googleapis.com/pipeline/v2/read_bytes_count	Il conteggio cumulativo dei byte letti da una pipeline.	enable_rbac private_service_connect_enabled
Byte di pipeline con shuffling	datafusion.googleapis.com/pipeline/v2/shuffle_bytes_count	Il conteggio cumulativo dei byte rimescolati in una pipeline.	enable_rbac private_service_connect_enabled
Record di plug-in elaborati in entrata	datafusion.googleapis.com/pipeline/v2/plugin/incoming_records_count	Conteggio cumulativo dei record che entrano in un plug-in.	enable_rbac private_service_connect_enabled stage_name
Record di plug-in elaborati in uscita	datafusion.googleapis.com/pipeline/v2/plugin/outgoing_records_count	Il conteggio cumulativo dei record che escono da un plug-in.	enable_rbac private_service_connect_enabled stage_name

Etichette delle risorse monitorate dell'istanza Cloud Data Fusion

Filtra e aggrega le metriche con le seguenti etichette delle risorse monitorate Istanza Cloud Data Fusion:

Nome dell'etichetta	Descrizione
resource_container	L'ID del progetto cliente.
org_id	L'ID dell'organizzazione a cui appartiene il progetto cliente.
location	La zona o la regione in cui è ospitata l'istanza.
edition	L'edizione dell'istanza.
is_private_ip_enabled	Indica se l'istanza utilizza un indirizzo IP interno.
version	La versione del data plane di Cloud Data Fusion dell'istanza.
instance_id	L'ID istanza Cloud Data Fusion.
namespace	Il nome dello spazio dei nomi.

Etichette delle metriche dell'istanza

Filtra e aggrega le metriche con le seguenti etichette delle metriche di Cloud Data Fusion in Monitoring:

Nome	Metrica	Descrizione	Etichette metriche
Stato del servizio	datafusion.googleapis.com/instance/v2/service_available	La disponibilità dei servizi Cloud Data Fusion.	service enable_rbac private_service_connect_enabled
Numero di pipeline implementate	datafusion.googleapis.com/instance/v2/pipelines	Il numero di pipeline implementate.	enable_rbac private_service_connect_enabled maintenance_window_enabled
Conteggio delle pipeline simultanee in esecuzione	datafusion.googleapis.com/instance/v2/concurrent_pipelines_running	Il numero di pipeline in esecuzione contemporaneamente.	enable_rbac private_service_connect_enabled
Conteggio degli avvii di pipeline simultanei	datafusion.googleapis.com/instance/v2/concurrent_pipelines_launched	Il numero di pipeline in stato Provisioning o Avvio.	enable_rbac private_service_connect_enabled
Richieste API REST CDAP ricevute	datafusion.googleapis.com/instance/v2/api_request_count	Il conteggio cumulativo delle richieste API REST ricevute da un servizio nel backend.	service handler method enable_rbac private_service_connect_enabled
Risposte API REST CDAP inviate	datafusion.googleapis.com/instance/v2/api_response_count	Il conteggio cumulativo delle risposte dell'API REST inviate da un servizio nel backend.	service handler method response_code enable_rbac private_service_connect_enabled
Numero di controlli di autorizzazione	datafusion.googleapis.com/instance/v2/authorization_check_count	Il conteggio cumulativo dei controlli di autorizzazione eseguiti dall'enforcer dell'accesso.	enable_rbac type private_service_connect_enabled
Ora del controllo di autorizzazione	datafusion.googleapis.com/instance/v2/authorization_check_time	La latenza dei controlli di autorizzazione eseguiti dall'agente di applicazione dell'accesso.	enable_rbac type private_service_connect_enabled
Numero di bozze di pipeline	datafusion.googleapis.com/instance/v2/draft_pipelines	Il numero di pipeline bozza.	enable_rbac private_service_connect_enabled
Numero di spazi dei nomi	datafusion.googleapis.com/instance/v2/namespaces	Il numero di spazi dei nomi.	enable_rbac private_service_connect_enabled

Passaggi successivi

• Scopri di più sulla visualizzazione delle metriche di Cloud Data Fusion in Monitoring.