Componenti di Dataproc Serverless

I componenti Dataproc Serverless ti consentono di eseguire carichi di lavoro batch di Apache Spark da una pipeline all'interno di Vertex AI Pipelines. Dataproc Serverless esegue i carichi di lavoro batch su un'infrastruttura di calcolo gestita, scalando le risorse in base alle esigenze.

Scopri di più su Dataproc Serverless e sui carichi di lavoro Spark supportati.

In Dataproc Serverless, una risorsa Batch rappresenta un carico di lavoro batch. L'SDK Google Cloud Pipeline Components include i seguenti operatori per creare risorse Batch e monitorarne l'esecuzione:

• DataprocPySparkBatchOp
• DataprocSparkBatchOp
• DataprocSparkRBatchOp
• DataprocSparkSqlBatchOp

Riferimento API

• Per il riferimento ai componenti, consulta la documentazione di riferimento dell'SDK Google Cloud Pipeline Components per i componenti Dataproc Serverless .

• Per il riferimento alle risorse Dataproc Serverless, consulta la seguente pagina di riferimento dell'API:

  • Batch risorsa

Tutorial

• Iniziare a utilizzare i componenti della pipeline Dataproc Serverless

Cronologia delle versioni e note di rilascio

Per scoprire di più sulla cronologia delle versioni e sulle modifiche all'SDK Google Cloud Pipeline Components, consulta le note di rilascio dell'SDK Google Cloud Pipeline Components.

Contatti dell'assistenza tecnica

Per qualsiasi domanda, scrivi all'indirizzo [e-mail].