I componenti serverless di Dataproc consentono di eseguire carichi di lavoro batch di Apache Spark da una pipeline all'interno di Vertex AI Pipelines. Dataproc Serverless esegue i carichi di lavoro batch su un'infrastruttura di computing gestita, con scalabilità automatica in base alle esigenze.
Scopri di più su Dataproc Serverless e sui carichi di lavoro Spark supportati.
In Dataproc Serverless, una risorsa Batch
rappresenta un carico di lavoro batch.
L'SDK dei componenti della pipeline di Google Cloud include i seguenti operatori per creare risorse Batch
e monitorarne l'esecuzione:
Riferimento API
Per informazioni di riferimento sui componenti, consulta la documentazione di riferimento dell'SDK dei componenti della pipeline di Google Cloud per i componenti serverless di Dataproc .
Per riferimento alle risorse Dataproc Serverless, consulta la seguente pagina di riferimento dell'API:
Batch
risorsa
Tutorial
Cronologia delle versioni e note di rilascio
Per saperne di più sulla cronologia delle versioni e sulle modifiche all'SDK dei componenti della pipeline di Google Cloud, consulta le note di rilascio dell'SDK per i componenti della pipeline di Google Cloud.
Contatti dell'assistenza tecnica
In caso di domande, scrivi all'indirizzo kfp-dataproc-components@google.com.