Dataproc-Vorlagen

Verwenden Sie Dataproc-Vorlagen auf GitHub, um Dataproc-Arbeitslasten und -Jobs einzurichten und auszuführen.

Vorlagen sind in den folgenden Sprachen und Ausführungsumgebungen verfügbar:

  • Airflow-Orchestrierungsvorlagen: Führen Sie Spark-Jobs aus DAGs in Airflow aus.
  • Java-Vorlagen: Führen Sie Spark-Batcharbeitslasten oder -Jobs in Google Cloud Serverless for Apache Spark oder einem vorhandenen Dataproc-Cluster aus.
  • Python-Vorlagen: Führen Sie PySpark-Batcharbeitslasten auf Google Cloud Serverless for Apache Spark aus.
  • Notebook-Vorlagen: Führen Sie Spark-Jobs mit Vertex AI Notebooks aus.