Mengonfigurasi database MySQL Amazon RDS untuk CDC

Halaman ini menjelaskan cara mengonfigurasi change data capture (CDC) untuk mengalirkan data dari database Amazon RDS for MySQL ke tujuan yang didukung, seperti BigQuery atau Cloud Storage.

Membuat grup parameter

1. Luncurkan Dasbor Amazon RDS Anda.

2. Di Navigation Drawer, klik Parameter Groups.

3. Klik Buat Grup Parameter. Halaman Create Parameter Group akan muncul.

4. Pilih family database yang cocok dengan database Anda, berikan nama dan deskripsi untuk grup parameter.

5. Klik Buat.

6. Pilih kotak centang di sebelah kiri grup parameter yang baru dibuat.

7. Di bagian Tindakan grup parameter, klik Edit.

8. Gunakan tabel berikut untuk menetapkan parameter grup Anda.

   • Untuk replikasi berbasis binlog:

     Parameter	Nilai
     binlog_format	ROW
     log_bin_use_v1_row_events	1
     read_only	0
     net_read_timeout	3600
     net_write_timeout	3600
     wait_timeout	86400

   • Untuk replikasi berbasis GTID:

     Parameter	Nilai
     binlog_format	ROW
     log_bin_use_v1_row_events	1
     read_only	0
     net_read_timeout	3600
     net_write_timeout	3600
     wait_timeout	86400
     expire-logs-days	7
     binlog_row_image	FULL
     max_allowed_packet	1G (nilai yang direkomendasikan)
     log-replica-updates	1
     enforce-gtid-consistency	ON
     gtid_mode	ON Anda hanya dapat menyetel parameter ini ke ON setelah Anda menyetel enforce-gtid-consistency ke ON. Secara umum, gtid_mode dapat memiliki nilai berikut: OFF OFF_PERMISSIVE ON_PERMISSIVE ON Anda hanya dapat mengubah nilai parameter gtid_mode satu langkah dalam satu waktu. Misalnya, jika mode saat ini ditetapkan ke OFF, lakukan hal berikut: Ubah setelan menjadi OFF_PERMISSIVE. Ubah setelan menjadi ON_PERMISSIVE. Ubah setelan menjadi ON. Untuk mengetahui informasi selengkapnya, lihat dokumentasi MySQL.

9. Klik Simpan Perubahan.

Membuat replika baca

Meskipun langkah ini secara resmi bersifat opsional, sebaiknya Anda menggunakan replika baca karena akan mengurangi beban replikasi pada database MySQL Anda secara signifikan.

Jika Anda memilih untuk mereplikasi langsung dari server utama, ikuti petunjuk di Mengonfigurasi replika baca (atau database sumber).

1. Luncurkan Dasbor Amazon RDS Anda.

2. Di Navigation Drawer, klik Databases.

3. Pilih instance database utama yang ingin Anda hubungkan dengan Datastream.

4. Luaskan tombol Actions, lalu klik Create read replica.

5. Konfigurasi replika baca sesuai kebutuhan.

6. Klik Buat replika baca.

Mengonfigurasi replika baca (atau database sumber)

1. Luncurkan Dasbor Amazon RDS Anda.

2. Di Navigation Drawer, klik Databases.

3. Pilih replika baca yang Anda buat, lalu klik Ubah.

4. Buka bagian Konfigurasi tambahan.

5. Pilih grup parameter yang Anda buat.

6. Tetapkan Periode retensi cadangan ke 7 hari.

7. Klik Lanjutkan.

8. Di bagian Scheduling of modifications, pilih Apply immediately.

   Karena Anda mengubah replika baca, Anda harus menunggu hingga perubahan pada grup parameter diterapkan sebelum melanjutkan.

Pastikan grup parameter ditetapkan ke instance database

1. Luncurkan Dasbor Amazon RDS Anda.

2. Di Navigation Drawer, klik Databases, lalu pilih instance database Anda.

3. Klik tab Konfigurasi.

4. Pastikan Anda melihat grup parameter yang dibuat, dan statusnya adalah pending-reboot.

5. Mulai ulang instance database Anda untuk menyelesaikan konfigurasi. Untuk memulai ulang instance:

   1. Di Navigation Drawer, klik Instances.
   2. Pilih instance database Anda.
   3. Dari menu Instance Actions, pilih Reboot.
   Setelah Anda melakukan reboot pada instance database, statusnya akan berubah menjadi **sinkron**.

Menetapkan periode retensi log biner

1. Masukkan perintah MySQL berikut:

   call mysql.rds_set_configuration('binlog retention hours', 168);

   Anda memasukkan perintah ini karena ingin memastikan replikasi yang tepat dengan mengonfigurasi sistem untuk menyimpan log biner selama minimal 7 hari (atau 168 jam).

2. Mulai ulang server MySQL agar perubahan yang Anda buat dapat diterapkan.

Membuat pengguna Datastream

1. Buat pengguna Datastream:

   CREATE USER 'datastream'@'%' IDENTIFIED BY 'YOUR_PASSWORD';

2. Berikan hak istimewa berikut kepada mereka:

   GRANT REPLICATION SLAVE, SELECT, REPLICATION CLIENT ON *.* TO 'datastream'@'%';
   GRANT EXECUTE ON PROCEDURE mysql.rds_show_configuration TO 'datastream'@'%';
   FLUSH PRIVILEGES;

Langkah berikutnya

• Pelajari lebih lanjut cara kerja Datastream dengan sumber MySQL.