I componenti Dataproc Serverless consentono di eseguire carichi di lavoro batch di Apache Spark da una pipeline all'interno di Vertex AI Pipelines. Dataproc Serverless esegue carichi di lavoro batch su un'infrastruttura di computing gestita, con scalabilità automatica delle risorse secondo necessità.
Scopri di più su Dataproc Serverless e sui carichi di lavoro Spark supportati.
In Dataproc Serverless, una risorsa Batch
rappresenta un carico di lavoro batch.
L'SDK Google Cloud Pipeline components include i seguenti operatori per creare risorse Batch
e monitorarne l'esecuzione:
Riferimento API
Per il riferimento dei componenti, consulta la pagina di riferimento dell'SDK Google Cloud Pipeline Componenti per i componenti Dataproc Serverless .
Per informazioni di riferimento sulle risorse Dataproc Serverless, consulta la seguente pagina di riferimento dell'API:
Batch
risorsa
Tutorial
Cronologia delle versioni e note di rilascio
Per saperne di più sulla cronologia delle versioni e sulle modifiche all'SDK Google Cloud Pipeline Componenti, consulta le note di rilascio dell'SDK Google Cloud Pipeline Componenti.
Contatti dell'assistenza tecnica
In caso di domande, scrivi all'indirizzo kfp-dataproc-components@google.com.