Melihat streaming

Di bagian ini, Anda akan mempelajari cara melihat informasi tingkat tinggi dan mendetail tentang streaming.

Melihat informasi tingkat tinggi

Informasi tingkat tinggi tentang streaming mencakup:

  • Nama dan status streaming.
  • Profil koneksi sumber dan tujuan yang digunakan aliran data untuk mentransfer data dari database sumber ke tujuan.
  • Jenis profil dari profil koneksi.

Melihat informasi mendetail

Selain melihat informasi tingkat tinggi tentang aliran data, Anda dapat mengklik aliran data untuk melihat informasi tambahan, termasuk:

  • Region tempat streaming disimpan. Aliran data, seperti semua resource, disimpan di region. Aliran data hanya dapat menggunakan profil koneksi dan konfigurasi konektivitas pribadi yang berada di region yang sama.
  • Saat streaming dibuat, terakhir diperbarui, atau dipulihkan.
  • Label apa pun yang ditambahkan ke aliran data. Label ini digunakan untuk mengatur streaming.
  • Bergantung pada database sumber, metode CDC yang Anda pilih untuk aliran data.
  • Tabel dan skema dalam database sumber yang harus disertakan Datastream saat memproses streaming.
  • Tabel dan skema di database sumber yang harus dikecualikan oleh Datastream saat memproses streaming.
  • Untuk semua sumber selain PostgreSQL, metode CDC ditetapkan untuk streaming.
  • Untuk sumber Oracle: metode akses file log.
  • Apakah pengisian ulang historis diaktifkan atau dinonaktifkan untuk streaming.
    • Jika diaktifkan, jumlah skema dan tabel di database sumber yang dikecualikan dari pengisian ulang.
  • Untuk tujuan BigQuery:
    • Apakah set data tujuan adalah set data dinamis atau default.
    • Apakah mode tulis untuk streaming ditetapkan ke Gabungkan atau Hanya tambahkan.
    • Jika Anda memilih Mode penggabungan, konfigurasi batas keusangan akan diterapkan ke tabel BigQuery baru yang dibuat oleh Datastream.
  • Untuk tujuan Cloud Storage:
    • Lokasi tujuan tempat aliran data mentransfer skema, tabel, dan data dari database sumber.
    • Format file yang ditulis ke tujuan. Datastream mendukung dua format output: Avro dan JSON.
  • Apakah data Anda dienkripsi dengan kunci yang dikelola oleh Google (Dikelola Google) atau oleh Anda (Dikelola pelanggan).
  • Link dan jalur ke kunci enkripsi yang dikelola pelanggan (jika Anda mengelola enkripsi).
  • Link untuk membuat kebijakan pemberitahuan untuk streaming.
  • Status jumlah pengisian ulang yang sedang berlangsung, tertunda, atau gagal.
  • Jumlah peristiwa yang diproses dan dimuat ke tujuan oleh Datastream dalam 7 hari terakhir.
  • Jumlah peristiwa yang tidak dapat diproses Datastream dalam 7 hari terakhir.

  • Grafik Keaktualan data. Grafik ini menampilkan selisih waktu antara data yang berada di sumber dan data yang ditransfer ke tujuan oleh aliran data. Ini dihitung sebagai waktu yang berlalu sejak Datastream terakhir kali memeriksa data baru di sumber.

    Untuk mengetahui informasi selengkapnya tentang grafik ini, lihat Memantau streaming.

  1. Buka halaman Streaming di Google Cloud Konsol.

    Buka halaman Streams

  2. Klik aliran data yang ingin Anda lihat detail informasinya. Informasi ini muncul di halaman Detail aliran data.

Setelah melihat informasi tingkat tinggi dan mendetail tentang aliran data, Anda dapat mengubahnya.

Langkah selanjutnya