Mengonfigurasi pengumpulan metrik


Dokumen ini menjelaskan cara mengonfigurasi Google Kubernetes Engine (GKE) untuk mengirim metrik ke Cloud Monitoring. Metrik di Cloud Monitoring dapat mengisi dasbor kustom, menghasilkan pemberitahuan, membuat tujuan tingkat layanan, atau diambil oleh layanan pemantauan pihak ketiga menggunakan Cloud Monitoring API.

GKE menyediakan beberapa sumber metrik:

  • Metrik sistem: metrik dari komponen sistem penting, yang menjelaskan resource tingkat rendah seperti CPU, memori, dan penyimpanan.
  • Google Cloud Managed Service for Prometheus: memungkinkan Anda memantau dan membuat pemberitahuan terkait workload Anda, menggunakan Prometheus, tanpa harus mengelola dan mengoperasikan Prometheus secara manual dalam skala besar.
  • Paket metrik kemampuan observasi:

    • Metrik bidang kontrol: metrik yang diekspor dari komponen bidang kontrol tertentu seperti server API dan penjadwal.
    • Metrik status kube: kumpulan metrik yang diseleksi dan diekspor dari layanan status kube, yang digunakan untuk memantau status objek Kubernetes seperti Pod, Deployment, dan lainnya. Untuk kumpulan metrik yang disertakan, lihat Menggunakan metrik status kube.

      Paket status kube adalah solusi terkelola. Jika memerlukan fleksibilitas yang lebih besar—misalnya, jika Anda perlu mengumpulkan metrik tambahan, atau perlu mengelola interval pengambilan atau mengambil resource lain—Anda dapat menonaktifkan paket, jika diaktifkan, dan men-deploy instance layanan metrik status kube open source Anda sendiri. Untuk informasi selengkapnya, lihat dokumentasi eksportir Google Cloud Managed Service for Prometheus untuk metrik status Kube.

    • cAdvisor/Kubelet: kumpulan metrik cAdvisor dan Kubelet yang diseleksi. Untuk kumpulan metrik yang disertakan, lihat Menggunakan metrik cAdvisor/Kubelet.

      Paket cAdvisor/Kubelet adalah solusi terkelola. Jika Anda memerlukan fleksibilitas yang lebih besar—misalnya, jika Anda perlu mengumpulkan metrik tambahan atau mengelola interval pengambilan atau mengambil resource lain—Anda dapat menonaktifkan paket, jika diaktifkan, dan men-deploy instance layanan metrik cAdvisor/Kubelet open source Anda sendiri.

    • Metrik NVIDIA Data Center GPU Manager (DCGM): metrik dari DCGM yang memberikan tampilan komprehensif tentang kondisi, performa, dan penggunaan GPU.

Anda juga dapat mengonfigurasi pemantauan aplikasi otomatis untuk beban kerja tertentu.

Metrik sistem

Saat cluster dibuat, GKE secara default mengumpulkan metrik tertentu yang dikeluarkan oleh komponen sistem.

Anda memiliki pilihan untuk mengirim metrik dari cluster GKE ke Cloud Monitoring atau tidak. Jika memilih untuk mengirim metrik ke Cloud Monitoring, Anda harus mengirim metrik sistem.

Semua metrik sistem GKE diserap ke Cloud Monitoring dengan awalan kubernetes.io.

Harga

Cloud Monitoring tidak mengenakan biaya untuk penyerapan metrik sistem GKE. Untuk mengetahui informasi selengkapnya, lihat harga Cloud Monitoring.

Mengonfigurasi pengumpulan metrik sistem

Untuk mengaktifkan pengumpulan metrik sistem, teruskan nilai SYSTEM ke flag --monitoring dari perintah gcloud container clusters create atau gcloud container clusters update.

Untuk menonaktifkan pengumpulan metrik sistem, gunakan nilai NONE untuk flag --monitoring. Jika pengumpulan metrik sistem dinonaktifkan, informasi dasar seperti penggunaan CPU, penggunaan memori, dan penggunaan disk tidak tersedia untuk cluster saat melihat metrik visibilitas.

Untuk cluster GKE Autopilot, Anda tidak dapat menonaktifkan pengumpulan metrik sistem.

Lihat Observability for GKE untuk mengetahui detail selengkapnya tentang integrasi Cloud Monitoring dengan GKE.

Untuk mengonfigurasi pengumpulan metrik sistem menggunakan Terraform, lihat blok monitoring_config di registry Terraform untuk google_container_cluster. Untuk informasi umum tentang penggunaan Google Cloud dengan Terraform, lihat Terraform dengan Google Cloud.

Daftar metrik sistem

Metrik sistem mencakup metrik dari komponen sistem penting yang penting untuk Kubernetes. Untuk mengetahui daftar metrik ini, lihat Metrik sistem GKE.

Jika mengaktifkan Cloud Monitoring untuk cluster, Anda tidak dapat menonaktifkan pemantauan sistem (--monitoring=SYSTEM).

Metrik yang diaktifkan secara default di GKE Enterprise

Dalam tabel berikut, tanda centang () menunjukkan metrik yang diaktifkan secara default saat Anda membuat dan mendaftarkan cluster baru di project dengan GKE Enterprise yang diaktifkan:

Nama metrik Autopilot Standard
Sistem
Server API
Scheduler
Controller Manager
Volume persisten (Penyimpanan)
Pod
Deployment
StatefulState
DaemonSet
HorizonalPodAutoscaler
cAdvisor
Kubelet
Metrik NVIDIA Data Center GPU Manager (DCGM)

Semua cluster terdaftar dalam project yang mengaktifkan GKE Enterprise dapat menggunakan paket untuk metrik bidang kontrol, metrik status kube, dan metrik cAdvisor/kubelet tanpa biaya tambahan. Jika tidak, metrik ini akan dikenai biaya Cloud Monitoring.

Memecahkan masalah metrik sistem

Jika metrik sistem tidak tersedia di Cloud Monitoring seperti yang diharapkan, lihat Memecahkan masalah metrik sistem.

Paket: Metrik bidang kontrol

Anda dapat mengonfigurasi cluster GKE untuk mengirim metrik tertentu yang dikeluarkan oleh server Kubernetes API, Scheduler, dan Controller Manager ke Cloud Monitoring.

Untuk informasi selengkapnya, lihat Mengumpulkan dan melihat metrik bidang kontrol.

Paket: Metrik status Kube

Anda dapat mengonfigurasi cluster GKE untuk mengirim kumpulan metrik status kube yang diseleksi dalam format Prometheus ke Cloud Monitoring. Paket metrik status kube ini mencakup metrik untuk Pod, Deployment, StatefulSet, DaemonSet, resource HorizontalPodAutoscaler, Volume Permanen, dan Klaim Volume Permanen.

Untuk informasi selengkapnya, lihat Mengumpulkan dan melihat metrik status Kube.

Paket: Metrik cAdvisor/Kubelet

Anda dapat mengonfigurasi cluster GKE untuk mengirim kumpulan metrik cAdvisor/Kubelet yang diseleksi dalam format Prometheus ke Cloud Monitoring. Kumpulan metrik yang diseleksi adalah subset dari kumpulan besar metrik cAdvisor/Kubelet yang disertakan dalam setiap deployment Kubernetes secara default. cAdvisor/Kubelet yang diseleksi dirancang untuk memberikan metrik yang paling berguna, sehingga mengurangi volume penyerapan dan biaya terkait.

Untuk informasi selengkapnya, lihat Mengumpulkan dan melihat metrik cAdvisor/Kubelet.

Paket: Metrik NVIDIA Data Center GPU Manager (DCGM)

Anda dapat memantau penggunaan, performa, dan kondisi GPU dengan mengonfigurasi GKE untuk mengirim metrik NVIDIA Data Center GPU Manager (DCGM) ke Cloud Monitoring.

Untuk mengetahui informasi selengkapnya, lihat Mengumpulkan dan melihat metrik NVIDIA Data Center GPU Manager (DCGM).

Menonaktifkan paket metrik

Anda dapat menonaktifkan penggunaan paket metrik di cluster. Anda mungkin ingin menonaktifkan paket tertentu untuk mengurangi biaya atau jika Anda menggunakan mekanisme alternatif untuk mengumpulkan metrik, seperti Google Cloud Managed Service for Prometheus dan eksportir.

Konsol

Untuk menonaktifkan pengumpulan metrik dari tab Details untuk cluster, lakukan hal berikut:

  1. Di konsol Google Cloud, buka halaman Kubernetes clusters:

    Buka Cluster Kubernetes

    Jika Anda menggunakan kotak penelusuran untuk menemukan halaman ini, pilih hasil yang subjudulnya adalah Kubernetes Engine.

  2. Klik nama cluster Anda.

  3. Di baris Fitur berlabel Cloud Monitoring, klik ikon Edit.

  4. Di menu drop-down Components, hapus komponen metrik yang ingin Anda nonaktifkan.

  5. Klik Oke.

  6. Klik Simpan Perubahan.

gcloud

  1. Buka jendela terminal dengan Google Cloud SDK dan Google Cloud CLI terinstal. Salah satu cara untuk melakukannya adalah menggunakan Cloud Shell.

  2. Di konsol Google Cloud, aktifkan Cloud Shell.

    Aktifkan Cloud Shell

    Di bagian bawah Google Cloud Console, Cloud Shell sesi akan terbuka dan menampilkan perintah command line. Cloud Shell adalah lingkungan shell dengan Google Cloud CLI yang sudah terinstal, dan dengan nilai yang sudah ditetapkan untuk project Anda saat ini. Diperlukan waktu beberapa detik untuk melakukan inisialisasi sesi.

  3. Panggil perintah gcloud container clusters update dan teruskan kumpulan nilai yang diperbarui ke tanda --monitoring. Kumpulan nilai yang disediakan ke flag --monitoring akan menggantikan setelan sebelumnya.

    Misalnya, untuk menonaktifkan pengumpulan semua metrik kecuali metrik sistem, jalankan perintah berikut:

    gcloud container clusters update CLUSTER_NAME \
        --location=COMPUTE_LOCATION \
        --enable-managed-prometheus \
        --monitoring=SYSTEM
    

    Perintah ini menonaktifkan pengumpulan paket metrik yang dikonfigurasi sebelumnya.

Terraform

Untuk mengonfigurasi pengumpulan metrik menggunakan Terraform, lihat blok monitoring_config di registry Terraform untuk google_container_cluster. Untuk informasi umum tentang penggunaan Google Cloud dengan Terraform, lihat Terraform dengan Google Cloud.

Memahami tagihan Pemantauan

Anda dapat menggunakan Cloud Monitoring untuk mengidentifikasi metrik status kube atau bidang kontrol yang menulis sampel dalam jumlah terbesar. Metrik ini paling banyak berkontribusi pada biaya Anda. Setelah mengidentifikasi metrik yang paling mahal, Anda dapat mengubah konfigurasi scrape untuk memfilter metrik ini dengan tepat.

Halaman Pengelolaan Metrik Cloud Monitoring memberikan informasi yang dapat membantu Anda mengontrol jumlah yang Anda belanjakan untuk metrik yang dapat ditagih tanpa memengaruhi visibilitas. Halaman Metrics Management melaporkan informasi berikut:

  • Volume transfer untuk penagihan berbasis byte dan sampel, di seluruh domain metrik dan untuk setiap metrik.
  • Data tentang label dan kardinalitas metrik.
  • Jumlah operasi baca untuk setiap metrik.
  • Penggunaan metrik dalam kebijakan pemberitahuan dan dasbor kustom.
  • Rasio error penulisan metrik.

Anda juga dapat menggunakan Pengelolaan Metrik untuk mengecualikan metrik yang tidak diperlukan, sehingga menghilangkan biaya penyerapannya.

Untuk melihat halaman Pengelolaan Metrik, lakukan tindakan berikut:

  1. Di konsol Google Cloud, buka halaman  Metrics management:

    Buka Pengelolaan metrik

    Jika Anda menggunakan kotak penelusuran untuk menemukan halaman ini, pilih hasil yang subjudulnya adalah Monitoring.

  2. Di toolbar, pilih jangka waktu. Secara default, halaman Pengelolaan Metrik menampilkan informasi tentang metrik yang dikumpulkan dalam satu hari sebelumnya.

Untuk informasi selengkapnya tentang halaman Pengelolaan Metrik, lihat Melihat dan mengelola penggunaan metrik.

Untuk mengidentifikasi metrik status kube atau panel kontrol mana yang memiliki jumlah sampel terbesar yang ditransfer, lakukan hal berikut:

  1. Di konsol Google Cloud, buka halaman  Metrics management:

    Buka Pengelolaan metrik

    Jika Anda menggunakan kotak penelusuran untuk menemukan halaman ini, pilih hasil yang subjudulnya adalah Monitoring.

  2. Pada kartu skor Contoh yang dapat ditagih yang ditransfer, klik Lihat diagram.

  3. Cari diagram Penyerapan Volume Namespace, lalu klik  Opsi diagram lainnya.

  4. Di kolom Metric, pastikan resource dan metrik berikut dipilih:
    Metric Ingestion Attribution dan Samples written by attribution id.

  5. Di halaman Filters, lakukan tindakan berikut:

    1. Di kolom Label, pastikan nilainya adalah attribution_dimension.

    2. Di kolom Comparison, pastikan nilainya adalah = (equals).

    3. Di kolom Value, pilih cluster.

  6. Hapus setelan Kelompokkan berdasarkan.

  7. Secara opsional, filter hanya untuk metrik tertentu. Misalnya, semua metrik server API control plane menyertakan "apiserver" sebagai bagian dari nama metrik, dan semua metrik Pod status kube menyertakan "kube_pod" sebagai bagian dari nama metrik, sehingga Anda dapat memfilter metrik yang berisi string tersebut:

    • Klik Add Filter.

    • Di kolom Label, pilih metric_type.

    • Di kolom Comparison, pilih =~ (equals regex).

    • Di kolom Nilai, masukkan .*apiserver.* atau .*kube_pod.*.

  8. Secara opsional, kelompokkan jumlah sampel yang diserap oleh project atau region GKE:

    • Klik Kelompokkan menurut.

    • Pastikan metric_type dipilih.

    • Untuk mengelompokkan menurut region GKE, pilih location.

    • Untuk mengelompokkan menurut project, pilih project_id.

    • Klik Oke.

  9. Secara opsional, kelompokkan jumlah sampel yang ditransfer berdasarkan nama cluster GKE:

    • Klik Kelompokkan menurut.

    • Untuk mengelompokkan berdasarkan nama cluster GKE, pastikan attribution_dimension dan attribution_id dipilih.

    • Klik Oke.

  10. Untuk melihat volume penyerapan untuk setiap metrik, di tombol berlabel Chart Table Both, pilih Both. Tabel ini menunjukkan volume yang ditransfer untuk setiap metrik di kolom Nilai.

    Klik header kolom Nilai dua kali untuk mengurutkan metrik berdasarkan volume penyerapan menurun.

Langkah-langkah ini menunjukkan metrik dengan rasio sampel tertinggi yang diserap ke dalam Cloud Monitoring. Karena metrik dalam paket visibilitas dikenai biaya berdasarkan jumlah sampel yang diserap, perhatikan metrik dengan rasio sampel terbesar yang diserap.

Metrik lainnya

Selain metrik sistem dan paket metrik yang dijelaskan dalam dokumen ini, metrik Istio juga tersedia untuk cluster GKE. Untuk mengetahui informasi harga, lihat harga Cloud Monitoring.

Metrik yang tersedia

Tabel berikut menunjukkan nilai yang didukung untuk flag --monitoring untuk perintah create dan update.

Sumber Nilai --monitoring Metrik yang Dikumpulkan
Tidak ada NONE Tidak ada metrik yang dikirim ke Cloud Monitoring; tidak ada agen pengumpulan metrik yang diinstal di cluster. Nilai ini tidak didukung untuk cluster Autopilot.
Sistem SYSTEM Metrik dari komponen sistem penting yang diperlukan untuk Kubernetes. Untuk mengetahui daftar lengkap metrik, lihat Metrik Kubernetes.
Server API API_SERVER Metrik dari kube-apiserver. Untuk mengetahui daftar lengkap metrik, lihat Metrik server API.
Scheduler SCHEDULER Metrik dari kube-scheduler. Untuk mengetahui daftar lengkap metrik, lihat Metrik penjadwal.
Controller Manager CONTROLLER_MANAGER Metrik dari kube-controller-manager. Untuk mengetahui daftar lengkap metrik, lihat Metrik Pengelola Pengontrol.
Volume persisten (Penyimpanan) STORAGE Metrik penyimpanan dari kube-state-metrics. Mencakup metrik untuk Volume Persisten dan Klaim Volume Persisten. Untuk mengetahui daftar lengkap metrik, lihat Metrik penyimpanan.
Pod POD Metrik pod dari kube-state-metrics. Untuk mengetahui daftar lengkap metrik, lihat Metrik pod.
Deployment DEPLOYMENT Metrik deployment dari kube-state-metrics. Untuk mengetahui daftar lengkap metrik, lihat Metrik deployment.
StatefulSet STATEFULSET Metrik StatefulSet dari kube-state-metrics. Untuk mengetahui daftar lengkap metrik, lihat metrik StatefulSet.
DaemonSet DAEMONSET Metrik DaemonSet dari kube-state-metrics. Untuk mengetahui daftar lengkap metrik, lihat metrik DaemonSet.
HorizonalPodAutoscaler HPA Metrik HPA dari kube-state-metrics. Lihat daftar lengkap metrik HorizonalPodAutoscaler.
cAdvisor CADVISOR Metrik cAdvisor dari paket metrik cAdvisor/Kubelet. Untuk mengetahui daftar lengkap metrik, lihat Metrik cAdvisor.
Kubelet KUBELET Metrik Kubelet dari cAdvisor/Kubelet Untuk mengetahui daftar lengkap metrik, lihat Metrik Kubelet.
Metrik NVIDIA Data Center GPU Manager (DCGM) DCGM Metrik dari NVIDIA Data Center GPU Manager (DCGM).

Anda juga dapat mengumpulkan metrik bergaya Prometheus yang ditampilkan oleh workload GKE apa pun menggunakan Google Cloud Managed Service for Prometheus, yang memungkinkan Anda memantau dan membuat pemberitahuan terkait workload, menggunakan Prometheus, tanpa harus mengelola dan mengoperasikan Prometheus secara manual dalam skala besar.

Langkah selanjutnya