Pengantar alur kerja BigQuery
Untuk meminta dukungan atau memberikan masukan terkait fitur ini, kirim email ke bigquery-workflows-preview-feedback@google.com.
Anda dapat menggunakan alur kerja BigQuery untuk mengotomatiskan dan menyederhanakan proses data BigQuery. Dengan alur kerja, Anda dapat menjadwalkan dan menjalankan aset kode secara berurutan untuk meningkatkan efisiensi dan mengurangi upaya manual.
Alur kerja didukung oleh Dataform.
Alur kerja terdiri dari satu atau beberapa aset kode berikut:
Anda dapat menggunakan alur kerja untuk menjadwalkan eksekusi aset kode. Misalnya, Anda dapat menjadwalkan kueri SQL untuk dijalankan setiap hari dan memperbarui tabel dengan data sumber terbaru, yang kemudian dapat mendukung dasbor.
Dalam alur kerja dengan beberapa aset kode, Anda menentukan urutan eksekusi. Misalnya, untuk melatih model machine learning, Anda dapat membuat alur kerja yang menggunakan kueri SQL untuk menyiapkan data, lalu notebook berikutnya melatih model menggunakan data tersebut.
Anda dapat menjadwalkan alur kerja agar berjalan secara otomatis pada waktu dan frekuensi yang ditentukan.
Batasan
Alur kerja tunduk pada batasan berikut:
- Anda tidak dapat menambahkan notebook atau kueri SQL yang ada ke alur kerja. Untuk menambahkan tugas alur kerja, Anda perlu membuat notebook atau kueri SQL baru dalam alur kerja.
- Anda tidak dapat memberikan akses ke alur kerja yang dipilih kepada pengguna lain.
- Alur kerja hanya tersedia di konsol Google Cloud.
- Anda tidak dapat mengubah region untuk menyimpan alur kerja setelah dibuat. Untuk mengetahui informasi selengkapnya, lihat Menetapkan region default untuk aset kode.
Region yang didukung
Semua aset kode disimpan di region default untuk aset kode. Mengupdate region default akan mengubah region untuk semua aset kode yang dibuat setelah waktu tersebut.
Tabel berikut mencantumkan region tempat alur kerja tersedia:
Deskripsi region | Nama region | Detail | |
---|---|---|---|
Afrika | |||
Johannesburg | africa-south1 |
||
Amerika | |||
Columbus | us-east5 |
||
Dallas | us-south1 |
|
|
Iowa | us-central1 |
|
|
Los Angeles | us-west2 |
||
Las Vegas | us-west4 |
||
Montréal | northamerica-northeast1 |
|
|
Virginia Virginia | us-east4 |
||
Oregon | us-west1 |
|
|
Sao Paulo | southamerica-east1 |
|
|
Carolina Selatan | us-east1 |
||
Asia Pasifik | |||
Hong Kong | asia-east2 |
||
Jakarta | asia-southeast2 |
||
Mumbai | asia-south1 |
||
Seoul | asia-northeast3 |
||
Singapura | asia-southeast1 |
||
Sydney | australia-southeast1 |
||
Taiwan | asia-east1 |
||
Tokyo | asia-northeast1 |
||
Eropa | |||
Belgia | europe-west1 |
|
|
Frankfurt | europe-west3 |
|
|
London | europe-west2 |
|
|
Madrid | europe-southwest1 |
|
|
Belanda | europe-west4 |
|
|
Turin | europe-west12 |
||
Zürich | europe-west6 |
|
|
Timur Tengah | |||
Doha | me-central1 |
||
Dammam | me-central2 |
Kuota dan batas
Alur kerja BigQuery tunduk pada kuota dan batas Dataform.
Harga
Eksekusi tugas alur kerja BigQuery akan dikenai biaya komputasi dan penyimpanan di BigQuery. Untuk informasi lebih lanjut, lihat Harga BigQuery.
Alur kerja yang berisi notebook dikenai biaya runtime Colab Enterprise berdasarkan jenis mesin default. Untuk mengetahui detail harga, lihat Harga Colab Enterprise.
Setiap operasi alur kerja BigQuery dicatat ke dalam log menggunakan Cloud Logging. Logging otomatis diaktifkan untuk menjalankan alur kerja BigQuery, yang dapat menimbulkan tagihan penagihan Cloud Logging. Untuk mengetahui informasi selengkapnya, lihat harga Cloud Logging.
Langkah berikutnya
- Pelajari cara membuat alur kerja.
- Pelajari cara mengelola alur kerja.
- Pelajari cara menjadwalkan alur kerja.