Menyamarkan data rahasia


Tutorial ini menunjukkan cara menggunakan plugin Cloud Data Fusion untuk Cloud DLP guna menyamarkan data sensitif.

Skenario

Pertimbangkan skenario berikut, yang mengharuskan beberapa informasi pelanggan sensitif disamarkan:

Tim dukungan Anda mendokumentasikan detail setiap kasus dukungan yang mereka tangani dalam tiket dukungan. Semua informasi dalam tiket dukungan akan diambil ke dalam file CSV. Teknisi dukungan tidak boleh mendokumentasikan informasi pelanggan yang dianggap sensitif, tetapi terkadang mereka melakukannya secara tidak sengaja. Anda melihat bahwa dalam file CSV, beberapa nomor telepon pelanggan muncul.

Anda ingin melihat file CSV dan menyembunyikan semua nomor telepon. Anda membuat pipeline Cloud Data Fusion yang menyamarkan data pelanggan yang sensitif dengan menggunakan plugin Cloud DLP.

Dalam tutorial ini, Anda akan membuat pipeline yang melakukan hal berikut:

  • Menyamarkan nomor telepon pelanggan dengan menyamarkannya dengan karakter #.
  • Menyimpan data sensitif yang disamarkan dan data yang tidak sensitif di bucket Cloud Storage.

Tujuan

  • Hubungkan Cloud Data Fusion ke sumber Cloud Storage.
  • Men-deploy plugin Cloud DLP.
  • Membuat template Cloud DLP kustom.
  • Gunakan plugin transformasi Redact untuk menyamarkan data pelanggan yang sensitif.
  • Tulis data output ke Cloud Storage.

Biaya

Dalam dokumen ini, Anda akan menggunakan komponen Google Cloud yang dapat ditagih berikut:

Untuk membuat perkiraan biaya berdasarkan proyeksi penggunaan Anda, gunakan kalkulator harga. Pengguna baru Google Cloud mungkin memenuhi syarat untuk mendapatkan uji coba gratis.

Sebelum memulai

  1. Sign in to your Google Cloud account. If you're new to Google Cloud, create an account to evaluate how our products perform in real-world scenarios. New customers also get $300 in free credits to run, test, and deploy workloads.
  2. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

    Go to project selector

  3. Make sure that billing is enabled for your Google Cloud project.

  4. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

    Go to project selector

  5. Make sure that billing is enabled for your Google Cloud project.

  6. Enable the Cloud Data Fusion, BigQuery, Cloud Storage, and Dataproc APIs.

    Enable the APIs

  7. Buat instance Cloud Data Fusion.

Mendapatkan izin Cloud DLP

  1. Di Konsol Google Cloud, buka halaman IAM.

    Buka halaman IAM

  2. Di tabel izin, di kolom Akun utama, cari akun layanan yang cocok dengan format service-project-number@gcp-sa-datafusion.iam.gserviceaccount.com.

  3. Klik Edit.

  4. Klik Add Another Role.

  5. Gunakan kotak penelusuran untuk melakukan penelusuran, lalu pilih DLP Administrator.

  6. Klik Simpan.

  7. Pastikan DLP Administrator muncul di kolom Role.

Saat menggunakan Cloud Data Fusion, Anda menggunakan Konsol Google Cloud dan UI Cloud Data Fusion terpisah. Di konsol Google Cloud, Anda dapat membuat project konsol Google Cloud serta membuat dan menghapus instance Cloud Data Fusion. Di UI Cloud Data Fusion, Anda dapat menggunakan berbagai halaman, seperti Studio atau Wrangler, untuk menggunakan fitur Cloud Data Fusion.

  1. Di konsol Google Cloud, buka halaman Instance.

    Buka halaman Instance

  2. Di kolom Actions untuk instance, klik link View Instance. UI Cloud Data Fusion akan terbuka di tab browser baru.

Membuat pipeline

Buat pipeline yang menyamarkan data pelanggan yang sensitif. Pipeline yang Anda build akan melakukan hal berikut:

  • Membaca data input menggunakan plugin sumber Cloud Storage.
  • Men-deploy plugin Cloud DLP dari Hub.
  • Menulis data output menggunakan plugin sink Cloud Storage.

Memuat data pelanggan

Tutorial ini menggunakan set data input, CallCenterRecords.csv, yang disediakan di bucket Cloud Storage yang tersedia secara publik.

  1. Buka instance Cloud Data Fusion Anda, lalu klik Menu > Studio.

  2. Di menu Source, klik plugin Cloud Storage.

    Pilih plugin.

  3. Di node Cloud Storage, klik Properties.

  4. Di kolom Nama referensi, masukkan nama.

  5. Di kolom Path, masukkan gs://datafusion-sample-datasets/CallCenterRecords.csv.

  6. Di kolom Format, pilih CSV.

  7. Untuk Output Schema, hapus kolom offset dan body. Klik Tambahkan, lalu masukkan kolom berikut:

    • Tanggal
    • Bank
    • Status
    • Kode Pos
    • Catatan

    Masukkan properti sumber.

  8. Klik Validasi untuk memeriksa error.

  9. Klik Tutup.

Menyamarkan data sensitif

Plugin Redact Cloud DLP mengidentifikasi data sensitif dalam aliran input data Anda dan menerapkan transformasi yang Anda tentukan ke data tersebut. Kumpulan data dianggap sensitif jika cocok dengan filter Cloud DLP yang telah ditentukan sebelumnya yang Anda pilih atau template kustom yang Anda tentukan.

Dalam tutorial ini, Anda ingin menyamarkan nomor telepon pelanggan yang tidak sengaja dicatat oleh beberapa teknisi dukungan di tim Anda. Mereka memasukkan informasi sensitif di bagian Catatan pada tiket dukungan, yang muncul sebagai kolom Catatan dalam file CSV. Anda membuat template Cloud DLP kustom, lalu memberikan ID template di menu properti plugin.

Men-deploy plugin Cloud DLP

  1. Di instance Cloud Data Fusion, klik Hub.

  2. Klik plugin Cloud DLP.

  3. Klik Deploy.

  4. Klik Selesai.

  5. Klik Tutup untuk keluar dari dialog Cloud DLP.

  6. Klik Tutup untuk keluar dari Hub.

Membuat template kustom

  1. Di konsol Google Cloud, buka halaman Cloud DLP.

    Buka Cloud DLP

  2. Dari menu Create, pilih Template. gambar

  3. Di kolom Template ID, masukkan ID untuk template Anda.

  4. Klik Lanjutkan.

  5. Di kolom Configure detection, klik Manage infotypes.

  6. Di tab Built-in, gunakan filter untuk menelusuri "nomor telepon".

    Filter.

  7. Pilih PHONE_NUMBER.

  8. Klik Selesai > Buat.

Pelajari lebih lanjut cara membuat template Cloud DLP.

Menerapkan transformasi Cloud DLP Redact

  1. Buka halaman Studio Cloud Data Fusion, lalu klik untuk memperluas menu Transform.

  2. Klik plugin Redact Cloud DLP.

    Klik plugin untuk menambahkannya ke pipeline Anda.

  3. Tarik panah koneksi dari node Cloud Storage ke node Redact.

    Hubungkan kedua node.

  4. Arahkan kursor ke node Redact, lalu klik Properties.

    1. Tetapkan Template Kustom ke Yes.

    2. Di kolom Template ID, masukkan ID template template kustom yang Anda buat.

    3. Di kolom Pencocokan , terapkan Masking pada Template kustom dalam Catatan.

    4. Di kolom Masking Character, masukkan #.

      Mask.

    5. Klik Validasi untuk memeriksa error.

    6. Klik Tutup.

Menyimpan data output

Simpan hasil pipeline Anda dalam file Cloud Storage.

  1. Dari halaman Studio, klik untuk meluaskan menu Sink.

  2. Klik Cloud Storage.

  3. Tarik panah koneksi dari node Redact ke node Cloud Storage2.

    Hubungkan node Redact ke node Cloud Storage kedua.

  4. Arahkan kursor ke node Cloud Storage2, lalu klik Properties.

    1. Di kolom Nama referensi, masukkan nama.

    2. Di kolom Path, masukkan jalur bucket Cloud Storage tempat Anda ingin menyimpan hasil pipeline. Cloud Data Fusion akan membuat bucket untuk Anda. Pastikan untuk mengikuti panduan pemberian nama bucket.

    3. Di kolom Format, pilih CSV.

    4. Klik Validasi untuk memastikan tidak ada error.

    5. Klik Tutup.

Menjalankan pipeline dalam mode pratinjau

Jalankan pipeline dalam mode pratinjau sebelum men-deploy-nya.

  1. Klik Pratinjau, lalu klik Jalankan.

    Jalankan pipeline.

    Mengklik Run akan menampilkan status pipeline, yang dimulai dengan Starting, lalu berubah menjadi Stop, lalu menjadi Run.

  2. Setelah pratinjau selesai dijalankan, di node Redact, klik Preview Data untuk melihat perbandingan data input dan output secara berdampingan. Pastikan nomor telepon telah disamarkan dengan karakter #.

    Pastikan nomor telepon disamarkan.

Menyamarkan jenis data lain

Saat memeriksa hasil pratinjau yang dijalankan, Anda melihat bahwa masih ada informasi sensitif yang muncul di kolom Catatan: alamat email. Anda kembali dan mengedit template Cloud DLP untuk menyamarkan alamat email juga.

  1. Di konsol Google Cloud, buka halaman Cloud DLP.

    Buka halaman Cloud DLP

  2. Di tab Configuration, pilih template Anda.

  3. Klik Edit.

  4. Klik Kelola infotype.

  5. Di tab Built-in, gunakan filter untuk menelusuri "ATAU" "alamat email".

    Filter.

  6. Pilih semua, lalu klik Selesai.

  7. Klik Simpan.

  8. Sekali lagi, jalankan pipeline Anda dalam mode pratinjau. Cloud Data Fusion akan otomatis menggunakan template Cloud DLP yang diperbarui.

  9. Pastikan nomor telepon dan alamat email telah disamarkan dengan karakter #.

    Pastikan data disamarkan.

Men-deploy dan menjalankan pipeline

  1. Pastikan mode Pratinjau tidak dicentang.

  2. Klik Simpan. Mengklik Simpan akan meminta Anda untuk memberi nama pipeline. Kemudian, klik OK.

  3. Klik Deploy.

  4. Setelah deployment selesai, klik Run. Menjalankan pipeline dapat memerlukan waktu beberapa menit. Sementara menunggu, Anda dapat mengamati Status transisi pipeline dari Penyediaan ke Dimulai ke Berjalan ke Penghentian Penyediaan ke Berhasil.

Melihat hasil

  1. Di konsol Google Cloud, buka halaman Cloud Storage.

    Buka Cloud Storage

  2. Di Storage browser, buka bucket Cloud Storage sink yang Anda tentukan di properti plugin Cloud Storage sink.

  3. Di Link URL, klik link untuk mendownload file CSV dengan hasil. Pastikan nomor telepon dan alamat email telah disamarkan dengan karakter #.

    Pastikan data disamarkan.

Pembersihan

Agar tidak perlu membayar biaya pada akun Google Cloud Anda untuk resource yang digunakan dalam tutorial ini, hapus project yang berisi resource tersebut, atau simpan project dan hapus setiap resource.

Menghapus instance Cloud Data Fusion

Ikuti petunjuk ini untuk menghapus instance Cloud Data Fusion.

Menghapus project

Cara termudah untuk menghilangkan penagihan adalah dengan menghapus project yang Anda buat untuk tutorial.

Untuk menghapus project:

  1. In the Google Cloud console, go to the Manage resources page.

    Go to Manage resources

  2. In the project list, select the project that you want to delete, and then click Delete.
  3. In the dialog, type the project ID, and then click Shut down to delete the project.

Langkah selanjutnya