Metrik dan periode penyelarasan

Flow Analyzer menganalisis data Log Aliran VPC yang disimpan dalam format data. Kumpulan data log berisi kolom dasar, yang merupakan kolom inti dari setiap kumpulan data log, dan kolom metadata yang menyediakan informasi lebih lanjut. Data log untuk memantau alur traffic terdiri dari tiga komponen utama:

  • Informasi fasilitas
  • Jenis metrik
  • Deret waktu

Informasi fasilitas

Data log mencakup data berikut terkait resource:

Jenis metrik

Data log mencakup data untuk jenis metrik berikut:

  • Byte terkirim: berisi informasi tentang volume payload dan tidak mencakup header. Nilai metrik ini bisa nol karena beberapa paket hanya memiliki header dan tidak termasuk payload apa pun.
  • Paket dikirim: menunjukkan jumlah paket yang dikirim dari sumber ke tujuan.

Data deret waktu mentah

Jumlah data metrik mentah dalam satu deret waktu dapat sangat banyak, dan biasanya ada banyak deret waktu yang terkait dengan jenis metrik. Untuk menganalisis seluruh kumpulan data untuk kesamaan, tren, atau pencilan, beberapa pemrosesan harus dilakukan pada deret waktu yang ada di set. Jika tidak, terlalu banyak data untuk dipertimbangkan.

Untuk memperkenalkan pengambilan sampel dan agregasi contoh di halaman ini, gunakan sejumlah kecil deret waktu hipotetis. Misalnya, diagram berikut menunjukkan data mentah selama beberapa menit untuk jenis metrik byte per detik:

Data deret waktu mentah.
Data deret waktu mentah (klik untuk memperbesar).

Data deret waktu mentah harus dimanipulasi sebelum dapat dianalisis, dan analisis sering kali melibatkan pengambilan sampel data dan menggabungkan beberapa data. Halaman ini menjelaskan dua teknik utama untuk menyaring data mentah:

  • Sampling, yang menghapus sebagian data dari pertimbangan. Google Cloud melakukan pengambilan sampel dan menggunakan data yang diperlukan dari catatan log untuk menjalankan operasi seperti yang ditunjukkan dalam kueri.
  • Agregasi, yang menggabungkan beberapa bagian data menjadi kumpulan data yang lebih kecil di sepanjang dimensi yang Anda tentukan.

Sampling dan agregasi adalah alat yang efektif untuk membantu mengidentifikasi pola yang menarik dan menyoroti tren atau pencilan dalam data.

Memahami periode penyelarasan

Langkah pertama dalam menggabungkan data deret waktu adalah alignment. Penyelarasan membuat deret waktu baru tempat data mentah diregularisasi dalam waktu sehingga dapat digabungkan dengan deret waktu lainnya yang diselaraskan. Alignment menghasilkan deret waktu dengan data yang berjarak teratur.

Penyelarasan melibatkan dua langkah:

  1. Membagi deret waktu menjadi interval waktu reguler, juga disebut pengelompokan data. Interval disebut periode penyelarasan.
  2. Menghitung nilai metrik tunggal untuk titik dalam periode penyelarasan. Anda yang memilih cara penghitungan poin tunggal tersebut; Anda dapat menjumlahkan semua nilai, atau menghitung rata-ratanya, atau menggunakan nilai maksimum.

Diagram berikut menunjukkan cara periode penyelarasan digunakan untuk mengelompokkan data dalam waktu mulai dan waktu berakhir.

Periode penyelarasan.
Periode perataan (klik untuk memperbesar).

Diagram berikut menunjukkan hasil penggunaan periode penyelarasan selama lima menit dengan langkah-langkah berikut:

  1. Membuat periode penyelarasan dengan interval waktu lima menit.
  2. Menghitung nilai metrik tunggal menggunakan jumlah nilai metrik dari data mentah.
Periode perataan lima menit.
Periode perataan lima menit (klik untuk memperbesar).

Perincian

Jika Anda tahu sesuatu terjadi dalam rentang beberapa menit, dan ingin menggali lebih dalam, sebaiknya gunakan waktu satu menit untuk penyelarasan.

Jika Anda tertarik untuk menjelajahi tren dalam jangka waktu yang lebih lama, periode perataan yang lebih besar mungkin lebih tepat. Periode perataan besar biasanya tidak berguna untuk melihat kondisi anomali jangka pendek, seperti lonjakan singkat pada traffic. Jika Anda menggunakan, misalnya, periode penyelarasan beberapa minggu, keberadaan anomali dalam periode tersebut masih dapat dideteksi, tetapi data yang diselaraskan mungkin terlalu umum untuk tidak banyak membantu.

Untuk durasi waktu yang besar, periode penyelarasan yang lebih kecil tidak membantu. Misalnya, jika Anda memilih penyelarasan 1 menit untuk periode 30 hari, Flow Analyzer akan menghasilkan lebih dari 43.000 titik data. Karena 43.000 titik data 10 kali lebih banyak dari piksel tampilan 4k, Anda tidak dapat melihat semua detail dan beberapa opsi dinonaktifkan untuk durasi waktu yang lama.

Opsi perataan

Opsi perataan mencakup penjumlahan nilai, atau menemukan nilai maksimum, minimum, atau rata-rata nilai, menemukan nilai persentil yang dipilih, menghitung nilai, dan lainnya. Dengan Penganalisis Alur, Anda dapat menggunakan berbagai agregasi metrik sebagai opsi perataan.

Jika Anda memilih Byte sent sebagai jenis metrik dan Source and destination sebagai agregasi traffic, opsi berikut akan tersedia.

  • Total traffic
  • Rasio traffic rata-rata
  • Rasio traffic median
  • Rasio traffic P95
  • Rasio traffic maksimum

Jika Anda memilih Paket terkirim sebagai jenis metrik dan Sumber dan tujuan sebagai agregasi traffic, opsi berikut akan tersedia.

  • Paket agregat
  • Kecepatan paket rata-rata
  • Kecepatan paket median
  • Kecepatan paket P95
  • Kapasitas paket maksimum

Diagram berikut menunjukkan hasil penggunaan dua opsi penyelarasan total traffic dan rasio traffic rata-rata.

Total dan traffic rata-rata.
Total dan rata-rata traffic (klik untuk memperbesar).

Menggunakan periode penyelarasan

Anda dapat menggunakan opsi Periode perataan untuk menggabungkan aliran traffic ke dalam interval waktu dengan durasi yang dipilih. Anda dapat memperbesar grafik lebih lanjut dan melihat detail spesifik, jika diperlukan.

Langkah selanjutnya