Ringkasan Datastream

Datastream adalah layanan replikasi dan pengambilan data perubahan (CDC) yang serverless dan mudah digunakan yang memungkinkan Anda menyinkronkan data dengan andal, dan dengan latensi minimal.

Datastream menyediakan replikasi data yang lancar dari database operasional ke BigQuery. Selain itu, Datastream mendukung penulisan aliran peristiwa perubahan ke Cloud Storage, dan menawarkan integrasi yang disederhanakan dengan template Dataflow untuk membuat alur kerja kustom guna memuat data ke berbagai tujuan, seperti Cloud SQL dan Spanner. Anda juga dapat menggunakan Datastream untuk memanfaatkan aliran peristiwa langsung dari Cloud Storage untuk mewujudkan arsitektur berbasis peristiwa. Datastream mendukung sumber Oracle, MySQL, SQL Server, dan PostgreSQL (termasuk AlloyDB untuk PostgreSQL).

Manfaat Datastream meliputi:

  • Penyiapan pipeline ELT (Ekstraksi, Pemuatan, Transformasi) yang lancar untuk replikasi data latensi rendah guna mengaktifkan insight mendekati real-time di BigQuery.
  • Serverless sehingga tidak ada resource yang harus disediakan atau dikelola, dan layanan diskalakan secara otomatis, sesuai kebutuhan, dengan periode nonaktif minimal.
  • Pengalaman penyiapan dan pemantauan yang mudah digunakan yang mencapai waktu pemerolehan manfaat super cepat.
  • Integrasi di seluruh portofolio Google Cloud layanan data' terbaik untuk integrasi data di Datastream, Dataflow, Pub/Sub, BigQuery, dan lainnya.
  • Menyinkronkan dan menyatukan aliran data di berbagai database dan aplikasi yang heterogen.
  • Keamanan, dengan opsi konektivitas pribadi dan keamanan yang Anda harapkan dari Google Cloud.
  • Akurat dan andal, dengan pelaporan status yang transparan dan fleksibilitas pemrosesan yang andal dalam menghadapi perubahan data dan skema.
  • Mendukung beberapa kasus penggunaan, termasuk analisis, replikasi database, dan sinkronisasi untuk migrasi dan konfigurasi cloud campuran, serta untuk membuat arsitektur berbasis peristiwa.

Kasus penggunaan

Kemampuan streaming Datastream memungkinkan berbagai kasus penggunaan:

  • Mereplikasi dan menyinkronkan data di seluruh organisasi dengan latensi minimal

    Anda dapat menyinkronkan data di berbagai database dan aplikasi heterogen dengan andal, dengan latensi rendah, dan dengan dampak minimal pada performa sumber. Manfaatkan kecanggihan aliran data untuk analisis, replikasi database, migrasi cloud, dan arsitektur berbasis peristiwa di seluruh lingkungan campuran.

  • Tingkatkan atau turunkan skala dengan arsitektur serverless secara lancar

    Siapkan dan jalankan secara cepat dengan layanan tanpa server dan mudah digunakan yang dapat diskalakan dengan lancar seiring perubahan volume data Anda. Fokuslah untuk mendapatkan insight terbaru dari data Anda dan merespons masalah prioritas tinggi, bukan mengelola infrastruktur, penyesuaian performa, atau penyediaan resource.

  • Berintegrasi dengan suite integrasi data Google Cloud

    Hubungkan data di seluruh organisasi Anda dengan rangkaian produk integrasi data Google Cloud. Datastream memanfaatkan template Dataflow untuk memuat data ke BigQuery, Spanner, dan Cloud SQL.

Elemen pengalaman

Ada tiga elemen utama yang membentuk Datastream:

  • Konfigurasi konektivitas pribadi memungkinkan Datastream berkomunikasi dengan sumber data melalui jaringan pribadi (secara internal dalam Google Cloud, atau dengan sumber eksternal yang terhubung melalui VPN atau Interconnect). Komunikasi ini terjadi melalui koneksi peering Virtual Private Cloud (VPC).
  • Profil koneksi mewakili informasi konektivitas ke sumber dan tujuan. Informasi ini akan digunakan oleh streaming.
  • Aliran data menggunakan informasi dalam profil koneksi untuk mentransfer CDC dan data pengisian ulang dari sumber ke tujuan.

Langkah selanjutnya