Modelli Dataproc

Per configurare ed eseguire carichi di lavoro e job Dataproc, utilizza i modelli Dataproc su GitHub

I modelli sono forniti nei seguenti ambienti di esecuzione e lingue:

• Modelli di orchestrazione Airflow: Esegui job Spark dai DAG in Airflow.
• Modelli Java: Esegui job o workload batch Spark su Google Cloud Serverless per Apache Spark o su un cluster Dataproc esistente.
• Modelli Python: Esegui carichi di lavoro batch PySpark su Google Cloud Serverless per Apache Spark.
• Modelli di notebook: Esegui job Spark utilizzando i notebook Vertex AI.