Questa pagina descrive come configurare un cluster Google Kubernetes Engine (GKE) per inviare un set selezionato di metriche cAdvisor/Kubelet a Cloud Monitoring utilizzando Google Cloud Managed Service per Prometheus. Questa pagina descrive anche la formattazione di queste metriche quando vengono scritte in Monitoring e come eseguire query sulle metriche.
L'insieme selezionato di metriche è un sottoinsieme dell'insieme di metriche cAdvisor/Kubelet integrate in ogni deployment Kubernetes per impostazione predefinita e include metriche relative alla riduzione del volume di importazione e dei costi associati.
Prima di iniziare
Prima di iniziare, assicurati di aver eseguito le seguenti attività:
- Abilita l'API Google Kubernetes Engine. Abilita l'API Google Kubernetes Engine
- Se vuoi utilizzare Google Cloud CLI per questa attività, installa e quindi initialize gcloud CLI. Se hai già installato gcloud CLI, ottieni la versione più recente eseguendo
gcloud components update
.
Requisiti
Per raccogliere metriche cAdvisor/Kubelet, il cluster GKE deve soddisfare i seguenti requisiti:
- Il cluster deve eseguire GKE versione 1.29.3-gke.1093000 o successiva.
- Nel cluster devono essere abilitate le metriche di sistema. Le metriche di sistema sono abilitate per impostazione predefinita quando crei un cluster che esegue la versione 1.29.3-gke.1093000 o successiva.
- Nel cluster è abilitata la raccolta gestita di Google Cloud Managed Service per Prometheus. La raccolta gestita è abilitata per impostazione predefinita quando crei un cluster che esegue la versione 1.29.3-gke.1093000 o successiva.
Configurazione della raccolta delle metriche di cAdvisor/Kubelet
Puoi abilitare le metriche cAdvisor/Kubelet in un cluster GKE esistente utilizzando la console Google Cloud, gcloud CLI o Terraform.
Console
Per configurare le metriche cAdvisor/Kubelet dalla scheda Dettagli per il cluster, segui questi passaggi:
-
Nella console Google Cloud, vai alla pagina Cluster Kubernetes:
Se utilizzi la barra di ricerca per trovare questa pagina, seleziona il risultato il cui sottotitolo è Kubernetes Engine.
Fai clic sul nome del cluster.
Nella riga Funzionalità con etichetta Cloud Monitoring, fai clic sull'icona Modifica.
Nella finestra di dialogo Modifica Cloud Monitoring visualizzata, verifica che sia selezionata l'opzione Abilita Cloud Monitoring.
Nel menu a discesa Componenti, seleziona i componenti di cAdvisor/Kubelet da cui vuoi raccogliere le metriche:
- cAdvisor
- Kubelet
Fai clic su Ok.
Fai clic su Salva modifiche.
gcloud
Aggiorna il cluster per raccogliere le metriche:
gcloud container clusters update CLUSTER_NAME \
--location=COMPUTE_LOCATION \
--enable-managed-prometheus \
--monitoring=SYSTEM,CADVISOR,KUBELET
Sostituisci quanto segue:
CLUSTER_NAME
: il nome del cluster esistente.COMPUTE_LOCATION
: la località Compute Engine del cluster.
L'insieme di valori fornito al flag monitoring
sostituisce qualsiasi impostazione
precedente.
Terraform
Per configurare la raccolta delle metriche di cAdvisor/Kubelet utilizzando Terraform, consulta il blocco monitoring_config
nel
registro Terraform per google_container_cluster
.
Per informazioni generali sull'utilizzo di Google Cloud con Terraform, consulta
Terraform with Google Cloud.
Formato metrica
Tutte le metriche Kubernetes cAdvisor/Kubelet scritte in Cloud Monitoring
utilizzano il tipo di risorsa
prometheus_target
.
Ogni nome della metrica è preceduto dal prefisso prometheus.googleapis.com/
e da un suffisso che indica il tipo di metrica Prometheus, ad esempio /gauge
, /histogram
o /counter
. In caso contrario, ogni nome di metrica è identico a quello esposto da Kubernetes open source.
Esportazione da Cloud Monitoring
Le metriche cAdvisor/Kubelet possono essere esportate da Cloud Monitoring utilizzando l'API Cloud Monitoring. Poiché tutte le metriche di cAdvisor/Kubelet vengono importate utilizzando Google Cloud Managed Service per Prometheus, è possibile eseguire query sulle metriche di cAdvisor/Kubelet utilizzando Prometheus Query Language (PromQL). È inoltre possibile eseguire query utilizzando tramite Monitoring Query Language (MQL).
Esecuzione di query sulle metriche
Quando esegui una query sulle metriche cAdvisor/Kubelet, il nome che utilizzi dipende a seconda che tu stia utilizzando funzionalità basate su PromQL o Cloud Monitoring come MQL o l' interfaccia basata su menu dMetrics Explorerhe.
Le seguenti tabelle delle metriche di cAdvisor/Kubelet mostrano due versioni del nome di ogni metrica:
- Nome metrica PromQL: quando utilizzi PromQL nelle pagine di Cloud Monitoring della console Google Cloud o nei campi PromQL dell'API Cloud Monitoring, utilizza il nome della metrica PromQL.
- Nome metrica di Cloud Monitoring Se usi altre
funzionalità di Cloud Monitoring, usa il nome della metrica
nelle tabelle riportate di seguito. Questo nome deve essere preceduto dal prefisso
prometheus.googleapis.com/
, che è stato omesso dalle voci della tabella.
Metriche di cAdvisor
I nomi delle metriche di Cloud Monitoring in questa tabella devono essere preceduti dal prefisso prometheus.googleapis.com/
. Questo prefisso è stato omesso
dalle voci della tabella.
Nome metrica PromQL Nome metrica Cloud Monitoring |
|
---|---|
Tipo, Tipo, Unità
Risorse monitorate Versione GKE richiesta |
Descrizione Etichette |
container_cpu_cfs_periods_total container_cpu_cfs_periods_total/counter
|
|
CUMULATIVE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Numero di intervalli del periodo di applicazione trascorsi. Campionamento eseguito ogni 30 secondi.cpu
|
container_cpu_cfs_throttled_periods_total container_cpu_cfs_throttled_periods_total/counter
|
|
CUMULATIVE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Numero di intervalli di ciclo limitati. Campionamento eseguito ogni 30 secondi.cpu
|
container_cpu_usage_seconds_total container_cpu_usage_seconds_total/counter
|
|
CUMULATIVE , DOUBLE , s
prometheus_target 1.29.3-gke.1093000 |
Tempo di CPU totale consumato. Campionamento eseguito ogni 30 secondi.cpu
|
container_fs_limit_bytes container_fs_limit_bytes/gauge
|
|
GAUGE , DOUBLE , By
prometheus_target 1.29.3-gke.1093000 |
Numero di byte che possono essere consumati dal container su questo
file system. Campionamento eseguito ogni 30 secondi.disk
|
container_fs_read_seconds_total container_fs_read_seconds_total/counter
|
|
CUMULATIVE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Conteggio cumulativo di letture completate. Campionamento eseguito ogni 30 secondi.diskIO
|
container_fs_reads_bytes_total container_fs_reads_bytes_total/counter
|
|
CUMULATIVE , DOUBLE , By
prometheus_target 1.29.3-gke.1093000 |
Conteggio cumulativo dei byte letti. Campionamento eseguito ogni 30 secondi.diskIO
|
container_fs_reads_total container_fs_reads_total/counter
|
|
CUMULATIVE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Conteggio cumulativo di letture completate. Campionamento eseguito ogni 30 secondi.diskIO
|
container_fs_usage_bytes container_fs_usage_bytes/gauge
|
|
GAUGE , DOUBLE , By
prometheus_target 1.29.3-gke.1093000 |
Numero di byte consumati dal container su questo file system. Campionamento eseguito ogni 30 secondi.disk
|
container_fs_write_seconds_total container_fs_write_seconds_total/counter
|
|
CUMULATIVE , DOUBLE , s
prometheus_target 1.29.3-gke.1093000 |
Conteggio cumulativo dei secondi trascorsi a scrivere. Campionamento eseguito ogni 30 secondi.diskIO
|
container_fs_writes_bytes_total container_fs_writes_bytes_total/counter
|
|
CUMULATIVE , DOUBLE , By
prometheus_target 1.29.3-gke.1093000 |
Conteggio cumulativo dei byte scritti. Campionamento eseguito ogni 30 secondi.diskIO
|
container_fs_writes_total container_fs_writes_total/counter
|
|
CUMULATIVE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Conteggio cumulativo delle scritture completate. Campionamento eseguito ogni 30 secondi.diskIO
|
container_memory_rss container_memory_rss/gauge
|
|
GAUGE , DOUBLE , By
prometheus_target 1.29.3-gke.1093000 |
Dimensioni dell'RSS. Campionamento eseguito ogni 30 secondi.memory
|
container_memory_working_set_bytes container_memory_working_set_bytes/gauge
|
|
GAUGE , DOUBLE , By
prometheus_target 1.29.3-gke.1093000 |
Insieme di lavoro attuale. Campionamento eseguito ogni 30 secondi.memory
|
container_network_receive_bytes_total container_network_receive_bytes_total/counter
|
|
CUMULATIVE , DOUBLE , By
prometheus_target 1.29.3-gke.1093000 |
Conteggio cumulativo dei byte ricevuti. Campionamento eseguito ogni 30 secondi.network
|
container_network_receive_packets_dropped_total container_network_receive_packets_dropped_total/counter
|
|
CUMULATIVE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Conteggio cumulativo dei pacchetti eliminati durante la ricezione.
Campionamento eseguito ogni 30 secondi.network
|
container_network_receive_packets_total container_network_receive_packets_total/counter
|
|
CUMULATIVE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Conteggio cumulativo dei pacchetti ricevuti. Campionamento eseguito ogni 30 secondi.network
|
container_network_transmit_bytes_total container_network_transmit_bytes_total/counter
|
|
CUMULATIVE , DOUBLE , By
prometheus_target 1.29.3-gke.1093000 |
Conteggio cumulativo di byte trasmessi. Campionamento eseguito ogni 30 secondi.network
|
container_network_transmit_packets_dropped_total container_network_transmit_packets_dropped_total/counter
|
|
CUMULATIVE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Conteggio cumulativo dei pacchetti eliminati durante la trasmissione.
Campionamento eseguito ogni 30 secondi.network
|
container_network_transmit_packets_total container_network_transmit_packets_total/counter
|
|
CUMULATIVE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Conteggio cumulativo dei pacchetti trasmessi. Campionamento eseguito ogni 30 secondi.network
|
Metriche kubelet
I nomi delle metriche di Cloud Monitoring in questa tabella devono essere preceduti dal prefisso prometheus.googleapis.com/
. Questo prefisso è stato omesso
dalle voci della tabella.
Nome metrica PromQL Nome metrica Cloud Monitoring |
|
---|---|
Tipo, Tipo, Unità
Risorse monitorate Versione GKE richiesta |
Descrizione Etichette |
kubelet_certificate_manager_server_ttl_seconds kubelet_certificate_manager_server_ttl_seconds/gauge
|
|
GAUGE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Indicatore del TTL (time-to-live) più breve del certificato di servizio Kubelet. Il valore è espresso in secondi fino alla scadenza del certificato (negativo se già scaduto). Se il certificato di pubblicazione non è valido o non è utilizzato, il valore sarà +INF. Campionamento eseguito ogni 30 secondi. |
kubelet_node_name kubelet_node_name/gauge
|
|
GAUGE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Il nome del nodo. Il conteggio è sempre 1. Campionamento eseguito ogni 30 secondi.node
|
kubelet_pleg_relist_duration_seconds kubelet_pleg_relist_duration_seconds/histogram
|
|
CUMULATIVE , DISTRIBUTION , s
prometheus_target 1.29.3-gke.1093000 |
Durata in secondi per il reinserimento dei pod in PLEG. Campionamento eseguito ogni 30 secondi. |
kubelet_pod_worker_duration_seconds kubelet_pod_worker_duration_seconds/histogram
|
|
CUMULATIVE , DISTRIBUTION , s
prometheus_target 1.29.3-gke.1093000 |
Durata in secondi per la sincronizzazione di un singolo pod. Suddivisione per tipo di operazione: creazione, aggiornamento o sincronizzazione. Campionamento eseguito ogni 30 secondi.operation_type
|
kubelet_running_containers kubelet_running_containers/gauge
|
|
GAUGE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Numero di container attualmente in esecuzione. Campionamento eseguito ogni 30 secondi.container_state
|
kubelet_running_pods kubelet_running_pods/gauge
|
|
GAUGE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Numero di pod con una sandbox pod in esecuzione. Campionamento eseguito ogni 30 secondi. |
kubelet_runtime_operations_total kubelet_runtime_operations_total/counter
|
|
CUMULATIVE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Numero cumulativo di operazioni di runtime per tipo di operazione.
Campionamento eseguito ogni 30 secondi.operation_type
|
kubelet_volume_stats_available_bytes kubelet_volume_stats_available_bytes/gauge
|
|
GAUGE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Numero di byte disponibili nel volume. Campionamento eseguito ogni 30 secondi.namespace
persistentvolumeclaim
|
kubelet_volume_stats_capacity_bytes kubelet_volume_stats_capacity_bytes/gauge
|
|
GAUGE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Capacità in byte del volume. Campionamento eseguito ogni 30 secondi.namespace
persistentvolumeclaim
|
kubelet_volume_stats_inodes kubelet_volume_stats_inodes/gauge
|
|
GAUGE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Numero massimo di inode nel volume. Campionamento eseguito ogni 30 secondi.namespace
persistentvolumeclaim
|
kubelet_volume_stats_inodes_free kubelet_volume_stats_inodes_free/gauge
|
|
GAUGE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Numero di inode gratuiti nel volume. Campionamento eseguito ogni 30 secondi.namespace
persistentvolumeclaim
|
kubelet_volume_stats_inodes_used kubelet_volume_stats_inodes_used/gauge
|
|
GAUGE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Numero di inodi utilizzati nel volume. Campionamento eseguito ogni 30 secondi.namespace
persistentvolumeclaim
|
kubelet_volume_stats_used_bytes kubelet_volume_stats_used_bytes/gauge
|
|
GAUGE , DOUBLE , 1
prometheus_target 1.29.3-gke.1093000 |
Numero di byte utilizzati nel volume. Campionamento eseguito ogni 30 secondi.namespace
persistentvolumeclaim
|