I componenti serverless di Dataproc consentono di eseguire batch Apache Spark da una pipeline all'interno di Vertex AI Pipelines. Dataproc Serverless esegue i carichi di lavoro batch su un sistema di computing gestito infrastruttura e scalabilità automatica delle risorse in base alle esigenze.
Scopri di più su Dataproc Serverless e sui carichi di lavoro Spark supportati.
In Dataproc Serverless, una risorsa Batch
rappresenta un carico di lavoro batch.
L'SDK dei componenti della pipeline di Google Cloud include i seguenti operatori per
crea risorse Batch
e monitorane l'esecuzione:
Riferimento API
Per informazioni sui componenti, consulta Riferimento dell'SDK dei componenti della pipeline di Google Cloud per i componenti serverless di Dataproc .
Per riferimento alle risorse Dataproc Serverless, consulta l'API seguente pagina di riferimento:
Batch
risorsa
Tutorial
Cronologia delle versioni e note di rilascio
Per saperne di più sulla cronologia delle versioni e sulle modifiche all'SDK dei componenti della pipeline di Google Cloud, consulta le note di rilascio dell'SDK per i componenti della pipeline di Google Cloud.
Contatti dell'assistenza tecnica
In caso di domande, contatta kfp-dataproc-components@google.com.