Kuota dan batas

Dokumen ini mencantumkan quotas dan quotas yang berlaku untuk Formulir data.

Kuota membatasi jumlah resource Google Cloud bersama yang dapat digunakan project Google Cloud Anda, termasuk komponen hardware, software, dan jaringan. Oleh karena itu, kuota adalah bagian dari sistem yang melakukan hal berikut:

  • Memantau penggunaan atau pemakaian produk dan layanan Google Cloud oleh Anda.
  • Membatasi Anda konsumsi resource tersebut, karena alasan yang mencakup memastikan keadilan dan mengurangi lonjakan penggunaan.
  • Mempertahankan konfigurasi yang secara otomatis menerapkan pembatasan yang telah ditentukan.
  • Menyediakan sarana untuk meminta atau membuat perubahan pada kuota.

Pada umumnya, jika kuota terlampaui, sistem akan langsung memblokir akses ke resource Google yang relevan, dan tugas yang Anda coba lakukan akan gagal. Pada umumnya, kuota berlaku untuk setiap project Google Cloud serta digunakan bersama oleh semua aplikasi dan alamat IP yang menggunakan project Google Cloud tersebut.

Ada juga batasan untuk resource Dataform. Batas ini tidak terkait dengan sistem kuota. Batas tidak dapat diubah kecuali jika dinyatakan lain.

Pengisian kuota

Kuota harian diisi ulang secara berkala sepanjang hari, yang mencerminkan intent-nya untuk memandu perilaku pembatasan kapasitas. Muat ulang sesekali juga dilakukan untuk menghindari gangguan lama saat kuota habis. Lebih banyak kuota biasanya tersedia dalam hitungan menit, bukan diisi ulang secara global sekali sehari.

Meminta penambahan kuota

Untuk menambah atau mengurangi sebagian besar kuota, gunakan Konsol Google Cloud. Untuk mengetahui informasi lebih lanjut, lihat Meminta kuota yang lebih tinggi.

Membatasi penggunaan kuota

Untuk mempelajari cara membatasi penggunaan resource tertentu dengan menentukan kuota yang lebih kecil daripada default-nya, lihat Membatasi penggunaan.

Izin yang diperlukan

Untuk melihat dan memperbarui kuota Dataform di Konsol Google Cloud, Anda memerlukan izin yang sama seperti kuota Google Cloud mana pun. Untuk mengetahui informasi lebih lanjut, lihat Izin kuota.

Pemecahan masalah

Untuk mendapatkan informasi tentang memecahkan masalah error terkait kuota dan batas Dataform, lihat Pemecahan masalah.

Kuota formulir data

Dataform memiliki kuota API berikut:

Kuota Batas
Total permintaan per project, per region 6000/minute/project/region
Permintaan kompilasi per project, per region 120/minute/project/region
Permintaan akses file per project, per region 120/minute/project/region
Permintaan penginstalan paket per project, per region 120/minute/project/region
Permintaan pemanggilan alur kerja per project, per region 60/minute/project/region
Tindakan alur kerja per eksekusi 5.000

Kuota untuk layanan yang digunakan oleh Dataform

Dataform menggunakan layanan Google Cloud lainnya. Layanan ini memiliki kuota tingkat project, yang berlaku saat Anda menggunakan Dataform.

Formulir data menggunakan layanan Google Cloud berikut yang memiliki batas kuota sendiri:

Batas resource kompilasi bentuk data

Dataform memberlakukan batas penggunaan berikut pada resource kompilasi:

Batas penggunaan Nilai
Jumlah tindakan maksimum per kompilasi repositori 5.000
Jumlah maksimum dependensi per tindakan dalam grafik yang dikompilasi 50
Total ukuran data serial maksimum dari grafik tindakan yang dikompilasi 20 MB
Ukuran maksimum dependensi NPM 200 MB

Selain itu, Dataform memberlakukan batasan pada penggunaan CPU dan memori selama kompilasi. Jika batas ini terlampaui saat Anda mengompilasi kode, kompilasi akan gagal dan Dataform akan menampilkan error kompilasi.

Untuk memperkirakan penggunaan resource kompilasi repositori Anda, lihat Memperkirakan penggunaan resource kompilasi repositori Anda.

Repositori Anda mungkin melebihi batas penggunaan karena alasan berikut:

  • Bug loop tanpa batas dalam kode repositori.
  • Bug kebocoran memori dalam kode repositori.
  • Ukuran repositori yang besar, sekitar lebih dari 1.000 node alur kerja SQL.
  • Sejumlah besar kueri serentak.

Untuk mengetahui informasi selengkapnya tentang ukuran repositori di Dataform, lihat Ringkasan ukuran repositori.