Setelah menentukan, mem-build, dan menjalankan pipeline, Anda dapat melihat metrik yang terkait dengan tugas pipeline atau tugas pipeline di Metrics Explorer. Selain itu, Anda dapat membuat pemberitahuan dan metrik berbasis log kustom menggunakan Cloud Logging untuk memantau peristiwa seperti kegagalan pipeline.
Halaman ini menjelaskan cara melakukan tindakan berikut:
Melihat metrik Vertex AI Pipelines standar di Metrics Explorer
Membuat dan melihat metrik kustom di Logs Explorer (pratinjau)
Membuat dan melihat metrik kustom di Cloud Logging akan dikenai biaya. Untuk mengetahui informasi selengkapnya, lihat harga Cloud Logging.
Melihat metrik Vertex AI Pipelines standar di Metrics Explorer
Anda dapat melihat metrik berikut yang terkait dengan Vertex AI Pipelines di Metrics Explorer:
Metrik tingkat tugas pipeline:
Gunakan metrik
Vertex Pipelines Job - PipelineJob duration
untuk melihat durasi runtime proses pipeline.Gunakan metrik
Location - Executing PipelineJobs
untuk melihat jumlah operasi pipeline.
Metrik tingkat tugas pipeline:
Gunakan
Vertex Pipelines Job - Completed PipelineTasks
untuk melihat jumlah tugas pipeline yang telah selesai.Gunakan
Location - Executing PipelineTasks
untuk melihat jumlah tugas pipeline yang dieksekusi dalam operasi pipeline.
Melihat durasi runtime tugas pipeline
Gunakan petunjuk berikut untuk melihat metrik Vertex Pipelines Job - PipelineJob duration
di konsol Google Cloud:
Buka Metrics Explorer:
Di daftar Metric, pilih Vertex Pipelines Job > Pipelinejob > PipelineJob duration.
Klik Terapkan.
Opsional: Untuk memfilter kueri, tentukan satu atau beberapa kriteria dengan mengklik Filter. Contoh:
Untuk melihat durasi runtime tugas pipeline tertentu, gunakan filter
pipeline_job_id
.Untuk melihat durasi runtime tugas pipeline untuk lokasi tertentu, gunakan filter
location
.Untuk melihat durasi runtime tugas pipeline dalam status
PIPELINE_STATE_CANCELLED
,PIPELINE_STATE_CANCELLING
,PIPELINE_STATE_FAILED
,PIPELINE_STATE_PENDING
,PIPELINE_STATE_RUNNING
, atauPIPELINE_STATE_SUCCEEDED
, gunakan filterrun_state
.
Melihat jumlah operasi pipeline
Gunakan petunjuk berikut untuk melihat metrik Location - Executing PipelineJobs
di konsol Google Cloud:
Buka Metrics Explorer:
Dalam daftar Metric, pilih Location > Executing_vertexai_pipeline_jobs > Executing PipelineJobs.
Klik Terapkan.
Opsional: Untuk memfilter kueri, tentukan satu atau beberapa kriteria dengan mengklik Filter. Misalnya, untuk melihat jumlah tugas pipeline untuk lokasi tertentu, gunakan filter
location
.
Melihat jumlah tugas pipeline yang telah selesai
Gunakan petunjuk berikut untuk melihat metrik Vertex Pipelines Job - Completed PipelineTasks
di konsol Google Cloud:
Buka Metrics Explorer:
Dalam daftar Metric, pilih Vertex Pipelines Job > Pipelinejob > Completed PipelineTasks.
Klik Terapkan.
Opsional: Untuk memfilter kueri, tentukan satu atau beberapa kriteria dengan mengklik Filter. Contoh:
Untuk melihat jumlah tugas yang diselesaikan dalam operasi pipeline tertentu, gunakan filter
pipeline_job_id
.Untuk melihat jumlah tugas yang diselesaikan dalam operasi pipeline untuk lokasi tertentu, gunakan filter
location
.
Melihat jumlah tugas pipeline yang dieksekusi
Gunakan petunjuk berikut untuk melihat metrik Location - Executing PipelineTasks
di konsol Google Cloud:
Buka Metrics Explorer:
Dalam daftar Metric, pilih Location > Executing_vertexai_pipeline_tasks > Executing PipelineTasks.
Klik Terapkan.
Opsional: Untuk memfilter kueri, tentukan satu atau beberapa kriteria dengan mengklik Filter. Misalnya, untuk melihat jumlah tugas pipeline yang dijalankan untuk lokasi tertentu, gunakan filter
location
.
Membuat dan melihat metrik kustom di Logs Explorer
Anda dapat menggunakan Logs Explorer di konsol Google Cloud untuk membuat metrik berbasis log kustom yang melacak dan menganalisis pola dalam log pipeline Anda.
Contoh metrik kustom
Bagian ini menggambarkan contoh metrik kustom yang dapat Anda buat. Contoh ini meliputi:
Membuat metrik kustom untuk tugas pipeline yang gagal
Untuk membuat metrik penghitung berbasis log kustom yang memantau tugas pipeline yang gagal, lakukan tindakan berikut:
Buka Logs Explorer:
Pilih project Google Cloud yang sesuai.
Di menu drop-down Resource, pilih Tugas Vertex Pipelines.
Di menu drop-down Location, pilih lokasi pipeline Anda.
Di menu drop-down Semua pipeline_job_id, pilih ID tugas pipeline Anda.
Klik Terapkan.
Klik Buat Metrik.
Di layar Buat metrik log:
Tetapkan Jenis metrik: Pilih Penghitung.
Tetapkan kolom berikut di bagian Detail:
- Nama metrik log: Masukkan nama untuk metrik log Anda, misalnya,
pipelinejob_failed
. Pilih nama yang unik di antara metrik berbasis log di project Google Cloud Anda. Beberapa pembatasan penamaan berlaku. Untuk mengetahui informasi selengkapnya, lihat Pemecahan masalah. - Deskripsi: Masukkan deskripsi untuk metrik.
- Units: Biarkan kolom ini kosong atau masukkan angka 1.
- Nama metrik log: Masukkan nama untuk metrik log Anda, misalnya,
Tentukan filter metrik di bagian Filter selection. Buat filter yang hanya mengumpulkan entri log yang ingin Anda hitung dalam metrik menggunakan bahasa kueri logging, misalnya:
resource.type="aiplatform.googleapis.com/PipelineJob" jsonPayload.state="PIPELINE_STATE_FAILED"
Anda juga dapat menggunakan ekspresi reguler untuk membuat filter metrik.
Untuk membuka panel yang menampilkan entri log yang cocok dengan filter, klik Pratinjau log.
Opsional: Tambahkan label di bagian Labels. Untuk petunjuk mengenai cara membuat label, lihat Membuat label.
Untuk membuat metrik, klik Create metric.
Membuat metrik kustom untuk status pipeline akhir
Untuk membuat metrik penghitung berbasis log kustom yang memantau status akhir tugas pipeline Anda, lakukan tindakan berikut:
Buka Logs Explorer:
Pilih project Google Cloud yang sesuai.
Di menu drop-down Resource, pilih Tugas Vertex Pipelines.
Di menu drop-down Location, pilih lokasi pipeline Anda.
Di menu drop-down Semua pipeline_job_id, pilih ID tugas pipeline Anda.
Klik Terapkan.
Klik Buat Metrik.
Di layar Buat metrik log:
Tetapkan Jenis metrik: Pilih Penghitung.
Tetapkan kolom berikut di bagian Detail:
- Nama metrik log: Masukkan nama untuk metrik log Anda, misalnya,
Pipeline_state_final
. Pilih nama yang unik di antara metrik berbasis log di project Google Cloud Anda. Beberapa pembatasan penamaan berlaku. Untuk mengetahui informasi selengkapnya, lihat Pemecahan masalah. - Deskripsi: Masukkan deskripsi untuk metrik.
- Units: Biarkan kolom ini kosong atau masukkan angka 1.
- Nama metrik log: Masukkan nama untuk metrik log Anda, misalnya,
Tentukan filter metrik di bagian Filter selection. Buat filter yang hanya mengumpulkan entri log yang ingin Anda hitung dalam metrik menggunakan bahasa kueri logging, misalnya:
resource.type="aiplatform.googleapis.com/PipelineJob" jsonPayload.state="PIPELINE_STATE_SUCCEEDED" OR "PIPELINE_STATE_FAILED" OR "PIPELINE_STATE_CANCELLED"
Anda juga dapat menggunakan ekspresi reguler untuk membuat filter metrik.
Untuk membuka panel yang menampilkan entri log yang cocok dengan filter, klik Pratinjau log.
Opsional: Tambahkan label di bagian Labels. Untuk petunjuk mengenai cara membuat label, lihat Membuat label.
Untuk membuat metrik, klik Create metric.
Melihat tingkat kegagalan tugas pipeline
Tingkat kegagalan tugas pipeline dihitung sebagai rasio jumlah tugas pipeline dalam status akhir terhadap jumlah tugas pipeline yang gagal. Untuk membuat dasbor guna memantau tingkat kegagalan tugas pipeline, lakukan tindakan berikut:
Buat metrik untuk memantau tugas pipeline dalam status akhir. Untuk informasi selengkapnya, lihat Membuat metrik kustom untuk status pipeline akhir.
Buat metrik untuk memantau tugas pipeline dalam status gagal. Untuk informasi selengkapnya, lihat Membuat metrik kustom untuk tugas pipeline yang gagal.
Di bagian Monitoring pada konsol Google Cloud, buka halaman Metrics Explorer.
Di tab Konfigurasi, lakukan yang berikut:
Klik Tambahkan metrik lain.
Pilih opsi Tampilkan metrik sebagai rasio. Jika Anda memilih opsi ini:
Panel Deret waktu A diganti namanya menjadi Numerator.
Panel Deret waktu B diganti namanya menjadi Denominator.
Di panel Numerator, klik Pilih metrik guna memilih metrik yang dibuat untuk tugas pipeline yang gagal.
Di panel Denominator, klik Pilih metrik guna memilih metrik yang dibuat untuk tugas pipeline status akhir.
(Opsional) Konfigurasikan numerator dan denominator dengan menambahkan filter, atau dengan memperbarui kolom pengelompokan dan parameter perataan.
Untuk informasi selengkapnya tentang cara menambahkan filter, atau memperbarui kolom pengelompokan dan parameter perataan, lihat Membuat diagram rasio metrik.
Setelah Anda memilih numerator dan denominator, tingkat kegagalan tugas pipeline akan ditampilkan dalam grafik.
Setelah membuat grafik tingkat kegagalan tugas pipeline, Anda dapat menambahkannya ke dasbor kustom. Untuk informasi selengkapnya, lihat Menyimpan diagram untuk referensi di masa mendatang.
Untuk menyalin URL yang berisi konfigurasi grafik, klik ikon elipsis di sudut kanan atas grafik, lalu klik Bagikan dengan URL.