Pencadangan dan pemulihan CSI Cassandra

Version 1.11 (latest)

Versi yang didukung:

• v1.13 (terbaru)                        
• v1.12                         
• v1.11                         
• Daftar versi yang didukung

Versi yang tidak didukung:

• v1.10                                      
• v1.9                                         
• v1.8                                         
• v1.7                                         
• v1.6                                         
• v1.5                                         
• v1.4                                         
• v1.3                                         
• v1.2                                         
• v1.1                                         

Anda dapat mencadangkan dan memulihkan data campuran menggunakan snapshot CSI (Antarmuka Penyimpanan Container). Cadangan CSI menghasilkan snapshot disk dan menyimpannya sebagai data terenkripsi di penyimpanan cloud. Cadangan CSI tidak memerlukan bucket Google Cloud Storage atau server jarak jauh untuk menyimpan data cadangan.

Pencadangan CSI direkomendasikan untuk instance hybrid yang dihosting di Google Cloud, AWS, atau Azure.

Halaman ini menjelaskan langkah-langkah untuk menggunakan pencadangan dan pemulihan CSI hybrid. Untuk ringkasan tentang pencadangan dan pemulihan hybrid secara umum, lihat Ringkasan pencadangan dan pemulihan Casssandra.

Peringatan tentang penghapusan:

Helm

Berhati-hatilah dengan versi atau rilis komponen datastore yang Anda hapus. Anda dapat melihat rilis dengan perintah helm -n [apigee/apigee-system] ls. Untuk menghapus rilis tertentu, gunakan helm delete RELEASE-NAME.

apigeectl

Menggunakan perintah apigeectl delete dengan flag --all (misalnya, apigeectl delete --all -f overrides.yaml) akan menghapus semua data pencadangan snapshot. Untuk menyimpan data pencadangan snapshot, kecualikan flag --all (misalnya apigeectl delete -f overrides.yaml).

Batasan pencadangan dan pemulihan

Perhatikan batasan ini saat menggunakan pencadangan dan pemulihan CSI:

• Driver CSI yang digunakan oleh kelas penyimpanan yang dikonfigurasi harus mendukung snapshot CSI. Lihat daftar driver Kubernetes CSI ini untuk informasi pengemudi.
• Tidak semua platform didukung. Hanya platform Google Cloud, AWS, dan Azure yang didukung.
• OpenShift Container Platform tidak didukung karena batasan snapshot volume.
• Hanya platform cloud yang didukung. Platform lokal tidak didukung.
• Data cadangan CSI dan data cadangan hybrid non-CSI tidak kompatibel. Cadangan non-CSI tidak dapat digunakan dengan pemulihan CSI dan cadangan CSI tidak dapat digunakan dengan pemulihan non-CSI.
• Penginstalan dan fungsionalitas driver CSI adalah tanggung jawab vendor driver CSI.
• Pengguna bertanggung jawab untuk memastikan ketersediaan resource cluster yang memadai untuk penyediaan snapshot CSI.
• Pengguna bertanggung jawab untuk menghapus data ringkasan lama.

Menyiapkan pencadangan CSI

Untuk menjadwalkan pencadangan hybrid menggunakan CSI, lakukan langkah-langkah berikut:

1. Jika sebelumnya Anda belum menyiapkan pencadangan hybrid:
   1. Jalankan perintah create-service-account berikut untuk membuat akun layanan Google Cloud (SA) dengan peran roles/storage.objectAdmin standar. Peran SA ini memungkinkan Anda menulis data cadangan ke Cloud Storage. Jalankan perintah berikut dalam direktori yang sesuai untuk alat pengelolaan Anda:
      • Diagram Helm: $APIGEE_HELM_CHARTS_HOME/apigee-operator/etc/
      • apigeectl: HYBRID_BASE_DIRECTORY/hybrid-files/

      ./tools/create-service-account --env non-prod --dir ./service-accounts

      Perintah ini membuat satu akun layanan bernama apigee-non-prod untuk digunakan dalam lingkungan non-produksi dan menempatkan file kunci yang didownload dalam direktori ./service-accounts.

      Catatan: Jika Anda ingin membuat semua akun layanan individual untuk lingkungan produksi, gunakan perintah berikut:

      ./tools/create-service-account --env prod --dir ./service-accounts

      Untuk mengetahui informasi selengkapnya tentang akun layanan Google Cloud, lihat Membuat dan mengelola akun layanan.

   2. Perintah create-service-account menyimpan file JSON yang berisi kunci pribadi akun layanan. File tersebut disimpan di direktori yang sama dengan tempat perintah dijalankan. Anda akan memerlukan jalur ke file ini dalam langkah-langkah berikut.
2. Buka file overrides.yaml. Setel parameter berikut, seperti yang ditunjukkan dalam Contoh file yang diganti.
   1. Setel parameter umum yang ditampilkan di bawah dalam blok backup. Jika sudah menetapkan parameter ini untuk solusi pencadangan hybrid non-CSI, Anda dapat menggunakan parameter yang sama untuk snapshot CSI. Lihat tabel referensi properti cadangan untuk mengetahui informasi selengkapnya tentang setiap nilai.
      

      Untuk backup:

      • diaktifkan: Setel ke true untuk mengaktifkan pencadangan terjadwal.
      • pullPolicy dalam gambar: Tetapkan ke Always.
      • serviceAccountPath: Jalur ke akun layanan.
      • jadwal: Berikan jadwal ekspresi cron.
   2. Tetapkan parameter berikut untuk pencadangan khusus CSI:
      • Nilai grup penyimpanan Cassandra: Kelas penyimpanan Cassandra yang dikonfigurasi harus mendukung snapshot CSI agar pencadangan dan pemulihan CSI berfungsi. Untuk memeriksa apakah kelas penyimpanan mendukung snapshot CSI, jalankan perintah berikut untuk mendapatkan kelas penyimpanan yang tersedia:

        kubectl get sc

        Lihat output "Penyedia" untuk setiap kelas penyimpanan. Penyedia yang menggunakan CSI biasanya memiliki bagian ".csi." di namanya seperti "pd.csi.storage.gke.io". Cari nama penyedia layanan dalam daftar driver Kubernetes CSI ini. Jika kolom "Fitur Lainnya" untuk penyedia berisi kata "SNAPSHOT", berarti kelas penyimpanan yang menggunakan penyedia mendukung snapshot CSI.

        Tambahkan parameter ini di grup penyimpanan. Kedua nilai wajib diisi.

        • storageclass: Nama kelas penyimpanan yang mendukung snapshot CSI.
        • capacity: Kapasitas disk.
      • Jenis penyedia cloud:

        Setelah kemampuan snapshot CSI diverifikasi, ubah file penggantian untuk menggunakan pencadangan dan pemulihan CSI:

        • cloudProvider: Tetapkan cloudProvider di backup dan restore ke CSI.

Contoh konfigurasi pencadangan

Bagian ini menampilkan bagian terkait pencadangan dari contoh file overrides.yaml.

cassandra:
  hostNetwork: false
  replicaCount: 3
   storage:
    storageclass: standard-rwo
    capacity: 100Gi
  image:
     pullPolicy: Always

  backup:
   enabled: true
   image:
     pullPolicy: Always
   serviceAccountPath: "/Users/myuser/apigee-hybrid/hybrid-files/service-accounts/mycompany-hybrid-apigee-cassandra.json"
   cloudProvider: "CSI"
   schedule: "0 * * 11 *"

Meluncurkan pencadangan manual

Cadangan CSI dibuat secara otomatis sesuai dengan jadwal cron yang ditetapkan dalam file overrides.yaml.

Untuk memulai pencadangan CSI manual, gunakan perintah ini:

kubectl create job -n apigee --from=cronjob/apigee-cassandra-backup backup-pod-name

dengan backup-pod-name adalah nama pod cadangan yang akan dibuat.

Memverifikasi cadangan

Salah satu cara untuk memastikan bahwa pencadangan berhasil dibuat adalah dengan memeriksa snapshot volume pada cluster Kubernetes menggunakan perintah berikut:

kubectl get volumesnapshot -n apigee

Output menunjukkan daftar snapshot saat ini di cluster. Proses pencadangan CSI membuat snapshot setiap disk Cassandra. Jumlah snapshot yang dihasilkan harus sama dengan jumlah total pod cassandra dalam cluster.

Memulihkan cadangan

Gunakan proses ini untuk memulihkan cadangan CSI yang dibuat sebelumnya. Untuk informasi umum tentang memulihkan cadangan dan ringkasan prosesnya, lihat halaman ringkasan pemulihan.

Untuk memulai pemulihan cadangan CSI, ikuti petunjuk untuk pemulihan region tunggal non-CSI hybrid, tetapi gunakan nilai ini dalam blok restore di overrides.yaml Anda. Lihat tabel referensi properti cadangan untuk mengetahui informasi selengkapnya tentang setiap nilai dan contoh konfigurasi pemulihan untuk mengetahui contohnya.

• enabled: Setel ke true untuk mengaktifkan pemulihan untuk cadangan yang dirujuk dengan stempel waktu snapshotTimestamp.
• snapshotTimestamp: Memberikan stempel waktu cadangan CSI sebelumnya.
• serviceAccountPath: Jalur ke akun layanan.
• pullPolicy dalam gambar: Tetapkan ke Always.

Untuk menemukan nilai snapshotTimestamp yang akan dipulihkan, jalankan perintah ini untuk mendapatkan daftar snapshot yang tersedia:

kubectl get volumesnapshot -n apigee

Dalam daftar yang ditampilkan, nama snapshot berisi stempel waktu:

pvc-us-west2-b-20220803004907-47beff0e306d8861

Dalam contoh ini, stempel waktunya adalah 20220803004907.

Penting: Menghentikan cluster Cassandra adalah hal yang wajar dalam proses pemulihan CSI. Setelah menghentikan cluster, proses pemulihan akan membuat PVC baru yang berisi data cadangan, lalu membuat ulang cluster Cassandra menggunakan PVC baru. Jangan khawatir jika Anda melihat cluster dihentikan.

Contoh konfigurasi pemulihan

Bagian ini menampilkan bagian terkait pemulihan dari contoh file overrides.yaml.

cassandra:
  hostNetwork: false
  replicaCount: 3
   storage:
    storageclass: standard-rwo
    capacity: 100Gi
  image:
     pullPolicy: Always

  restore:
    enabled: true
    snapshotTimestamp: "20220908222130"
    serviceAccountPath: "/Users/myuser/apigee-hybrid/hybrid-files/service-accounts/mycompany-hybrid-apigee-cassandra.json"
    cloudProvider: "CSI"
    image:
      pullPolicy: Always

Bermigrasi ke pencadangan dan pemulihan CSI

Jika belum pernah menggunakan pencadangan dan pemulihan hybrid, Anda dapat mengikuti petunjuk di Menyiapkan pencadangan CSI untuk membuat cadangan CSI baru tanpa langkah-langkah di bagian ini. Langkah-langkah ini memandu Anda melakukan migrasi dari solusi pencadangan dan pemulihan non-CSI ke pencadangan CSI.

1. Buat cadangan baru menggunakan metode cadangan non-CSI yang saat ini dikonfigurasi.
2. Ubah konfigurasi pencadangan dalam file overrides.yaml hybrid untuk menggunakan penggantian pencadangan CSI seperti yang ditunjukkan dalam contoh konfigurasi pencadangan .
3. Terapkan perubahan pada file overrides.yaml:

   Helm

   helm upgrade datastore apigee-datastore/ \
     --namespace apigee \
     --atomic \
     -f OVERRIDES_FILE.yaml
   

   Catatan: Jika Anda melihat error yang menyatakan Error: UPGRADE FAILED: "datastore" has no deployed releases, ganti upgrade dengan install lalu coba kembali perintah tersebut.

   apigeectl

   $APIGEECTL_HOME/apigeectl apply -f OVERRIDES_FILE.yaml

4. Verifikasi tugas pencadangan:

   kubectl get cronjob -n apigee

5. Setelah tugas pencadangan selesai, pastikan snapshot telah dibuat. Jumlah snapshot yang dihasilkan harus setara dengan jumlah node Cassandra dalam instance Hybrid.

   kubectl get volumesnapshot -n apigee