Memantau streaming

Ringkasan

Anda dapat menggunakan Datastream untuk memantau data dan peristiwa yang diproses oleh aliran data. Informasi ini muncul dalam grafik berikut:

  • Throughput: Tingkat pemrosesan data atau peristiwa oleh Datastream. Tarif ini dapat berupa:

    • Jumlah data (dalam MB) yang ditransfer Datastream dari sumber ke tujuan.
    • Jumlah peristiwa yang dikaitkan dengan data yang ditransfer. Peristiwa adalah satu perubahan di sumber, seperti baris baru yang ditambahkan ke tabel dalam database.

  • Peristiwa yang tidak didukung: Jumlah peristiwa yang tidak dapat diproses dari sumber ke tujuan.

  • Keaktualan data: Perbedaan waktu antara data yang berada di sumber dan data yang ditransfer ke tujuan oleh aliran data. Metrik ini dihitung sebagai waktu yang berlalu antara stempel waktu sumber dan stempel waktu baca untuk peristiwa terlama yang sedang diproses. Jika tidak ada peristiwa baru yang dapat dibaca dari sumber, keaktualan akan ditetapkan ke 0.

    Jika ada peristiwa dalam antrean yang belum diproses oleh Datastream, peristiwa tersebut tidak akan diperhitungkan saat Datastream menghitung metrik keaktualan data. Misalnya, jika ada lonjakan throughput, hal tersebut hanya akan tercermin dalam metrik keaktualan setelah Datastream memproses peristiwa yang menyebabkan lonjakan tersebut.

  • Latensi sistem: Waktu yang diperlukan Datastream untuk memproses peristiwa. Interval ini dihitung sebagai waktu antara saat Datastream membaca peristiwa dan saat peristiwa ditulis ke tujuan.

  • Total latensi: Perbedaan waktu antara saat data ditulis ke sumber dan peristiwa yang sesuai ditulis ke tujuan.

Memantau data atau peristiwa yang diproses

  1. Buka halaman Forum di Konsol Google Cloud.

    Buka halaman Forum

  2. Klik aliran data yang ingin Anda pantau.

  3. Opsional. Scroll hingga grafik Keaktualan data muncul. Untuk grafik ini, klik link Create alerts policy guna membuat kebijakan pemberitahuan untuk grafik ini. Kebijakan pemberitahuan menjelaskan serangkaian kondisi yang ingin Anda pantau untuk grafik.

    Setelah mengklik link tersebut, halaman Create alerts policy akan muncul di Cloud Monitoring. Di halaman ini, Anda dapat menentukan kebijakan pemberitahuan untuk grafik. Hal ini termasuk menentukan kriteria yang akan memicu kebijakan, siapa yang akan diberi tahu jika kriteria terpenuhi, dan bagaimana mereka akan diberi tahu.

    Untuk informasi selengkapnya tentang kebijakan pemberitahuan, termasuk cara membuatnya, lihat Mengelola kebijakan pemberitahuan berbasis metrik.

  4. Klik tab MONITORING.

  5. Scroll hingga grafik yang diinginkan muncul yang mewakili data atau peristiwa yang dipantau Datastream.

  6. Secara opsional, jika Anda melihat grafik Throughput, pilih (byte/dtk) untuk melihat jumlah data yang ditransfer Datastream dari sumber ke tujuan, atau (peristiwa/dtk) untuk melihat jumlah peristiwa yang dikaitkan dengan data yang ditransfer.

  7. Untuk melihat jumlah data atau jumlah peristiwa yang diproses Datastream selama jangka waktu tertentu, klik 1 jam, 6 jam, 12 jam, 1 hari, 2 hari, 4 hari, 7 hari, 14 hari, atau 30 hari.

    Atau, untuk menyetel rentang khusus, pilih menu Khusus, lalu gunakan alat pilih Kalender untuk menentukan tanggal dan waktu mulai serta tanggal dan waktu akhir untuk jumlah data atau jumlah acara yang ingin Anda lihat.

    Datastream memperbarui grafik di panel untuk mencerminkan pilihan Anda dan menampilkan interval yang telah ditentukan.

    Misalnya, jika hari ini adalah tanggal 31 Oktober 2021, dan Anda mengklik 30 hari, grafik akan menampilkan jumlah data atau jumlah peristiwa yang diproses Datastream sejak 01 Oktober 2021.

  1. Arahkan kursor ke garis dalam grafik untuk menampilkan jumlah data atau jumlah peristiwa yang diproses Datastream untuk tanggal dan waktu tertentu.