Komponen Dataproc Serverless memungkinkan Anda menjalankan workload batch Apache Spark dari pipeline dalam Vertex AI Pipelines. Dataproc Serverless menjalankan workload batch pada infrastruktur komputasi terkelola, serta melakukan penskalaan otomatis resource sesuai kebutuhan.
Pelajari lebih lanjut Dataproc Serverless dan workload Spark yang didukung.
Di Dataproc Serverless, resource Batch merepresentasikan workload batch.
Google Cloud Pipeline Components SDK menyertakan operator berikut untuk membuat resource Batch dan memantau eksekusinya:
Referensi API
Untuk referensi komponen, lihat halaman Referensi SDK google_cloud_pipeline_components.
Untuk referensi resource Dataproc Serverless, lihat halaman referensi API berikut:
- Referensi resource
Batch
Tutorial
Histori versi dan catatan rilis
Untuk mempelajari lebih lanjut histori versi dan perubahan pada Google Cloud Pipeline Components SDK, lihat Catatan Rilis Google Cloud Pipeline Components SDK.
Kontak dukungan teknis
Jika ada pertanyaan, hubungi kfp-dataproc-components@google.com.