Dataproc-Vorlagen

Verwenden Sie Dataproc-Vorlagen auf GitHub, um Dataproc-Arbeitslasten und ‑Jobs einzurichten und auszuführen.

Vorlagen sind in den folgenden Sprachen und Ausführungsumgebungen verfügbar:

  • Airflow-Orchestrierungsvorlagen: Mit diesen Vorlagen können Sie Spark-Jobs aus DAGs in Airflow ausführen.
  • Java-Vorlagen: Sie können Spark-Batcharbeitslasten oder ‑Jobs in Dataproc Serverless oder in einem vorhandenen Dataproc-Cluster ausführen.
  • Python-Vorlagen: Sie können PySpark-Batcharbeitslasten in Dataproc Serverless ausführen.
  • Notebook-Vorlagen: Sie können Spark-Jobs mit Vertex AI-Notebooks ausführen.