Componenti Dataproc Serverless

I componenti Dataproc Serverless ti consentono di eseguire carichi di lavoro batch di Apache Spark da una pipeline all'interno di Vertex AI Pipelines. Dataproc Serverless esegue i carichi di lavoro batch su un'infrastruttura di calcolo gestita, scalando le risorse in base alle esigenze.

Scopri di più su Dataproc Serverless e sui carichi di lavoro Spark supportati.

In Dataproc Serverless, una risorsa Batch rappresenta un carico di lavoro batch. L'SDK Pipeline Components di Google Cloud include i seguenti operatori per creare risorse Batch e monitorarne l'esecuzione:

• DataprocPySparkBatchOp
• DataprocSparkBatchOp
• DataprocSparkRBatchOp
• DataprocSparkSqlBatchOp

Riferimento API

• Per il riferimento ai componenti, consulta la documentazione Google Cloud Pipeline Components SDK per i componenti Dataproc Serverless .

• Per il riferimento alle risorse Dataproc Serverless, consulta la seguente pagina di riferimento dell'API:

  • Batch risorsa

Tutorial

• Iniziare a utilizzare i componenti della pipeline Dataproc Serverless

Cronologia delle versioni e note di rilascio

Per scoprire di più sulla cronologia delle versioni e sulle modifiche all'SDK Pipeline Components di Google Cloud , consulta le Note di rilascio dell'SDK Pipeline Components diGoogle Cloud .

Contatti dell'assistenza tecnica

Per qualsiasi domanda, scrivi all'indirizzo [e-mail].