Modelos do Dataproc

Para configurar e executar cargas de trabalho e jobs do Dataproc, use os modelos do Dataproc no GitHub.

Os modelos são fornecidos nos seguintes ambientes de execução e linguagem:

• Modelos de orquestração do Airflow: execute jobs do Spark em DAGs no Airflow.
• Modelos Java: execute cargas de trabalho ou jobs em lote do Spark no Google Cloud Serverless para Apache Spark ou em um cluster do Dataproc.
• Modelos do Python: execute cargas de trabalho em lote do PySpark no Google Cloud Serverless para Apache Spark.
• Modelos de notebook: execute jobs do Spark usando notebooks da Vertex AI.