Menjadwalkan pipeline

Halaman ini menjelaskan cara membuat jadwal untuk berjalannya pipeline. Misalnya, Anda dapat menjadwalkan pipeline agar berjalan setiap hari pada pukul 01.00 UTC.

Sebelum memulai

Untuk membuat jadwal, Anda harus memiliki pipeline yang di-deploy di Cloud Data Fusion. Jika belum memilikinya, Anda dapat membuat pipeline dengan mengikuti Panduan Memulai.

Untuk membuat, mengedit, atau menangguhkan jadwal, buka pipeline di Cloud Data Fusion:

  1. Buka instance Anda:

    1. Di konsol Google Cloud, buka halaman Cloud Data Fusion.

    2. Untuk membuka instance di antarmuka web Cloud Data Fusion, klik Instance, lalu klik View instance.

      Buka Instance

  2. Buka halaman List Cloud Data Fusion.

  3. Di tab Deployed, pilih pipeline yang diinginkan.

    Halaman Pipeline akan terbuka, tempat Anda dapat membuat, mengedit, atau menangguhkan jadwal pipeline.

Membuat jadwal

Dari halaman Pipeline di UI Cloud Data Fusion, klik Schedule.

Anda dapat menggunakan tab Dasar atau Lanjutan untuk menentukan jadwal Anda. Tab Advanced memungkinkan Anda menentukan jadwal yang kompleks menggunakan format unix-cron.

Dasar

  1. Pada tab Dasar, masukkan informasi berikut tentang jadwal Anda:

    • Frekuensi
    • Waktu mulai, ditentukan dalam UTC.
    • Opsional: Tanggal
    • Operasi serentak maksimum (hingga sepuluh kali berjalan). Jika sudah ada sepuluh pipeline yang berjalan, operasi terjadwal yang Anda buat tidak akan berjalan.
    • Opsional: Profil Compute Engine. Jika Anda membiarkannya kosong, profil Dataproc default akan digunakan.
  2. Klik Save and start schedule (atau Save schedule, jika Anda ingin memulainya nanti).

Lanjutan

  1. Di tab Advanced, tentukan jadwal menggunakan format unix-cron.

    Anda dapat menjadwalkan pipeline agar berjalan beberapa kali sehari, atau pada hari dan bulan tertentu.

    Kolom waktu memiliki format dan kemungkinan nilai yang ditunjukkan dalam tabel berikut:

    Kolom Format nilai yang valid
    Menit 0-59
    Jam 0-23
    Hari dalam sebulan 1-31
    Month 1-12
    Hari dalam seminggu 0-6 (Minggu adalah 0, Senin 1)
  2. Klik Save and start schedule (atau Save schedule, jika Anda ingin memulainya nanti).

Mengubah atau menangguhkan jadwal

Anda dapat mengubah atau menangguhkan jadwal pipeline dari halaman Pipeline di UI Cloud Data Fusion.

  • Untuk mengubah jadwal, klik Configure dan perbarui kolomnya.

  • Untuk menangguhkan jadwal, klik Batalkan jadwal.