Modelos do Dataproc

Para configurar e executar cargas de trabalho e tarefas do Dataproc, use os modelos do Dataproc no GitHub

Os modelos são fornecidos no seguinte idioma e ambientes de execução:

• Modelos de orquestração do Airflow: execute tarefas do Spark a partir de DAGs no Airflow.
• Modelos Java: execute cargas de trabalho ou tarefas em lote do Spark no Google Cloud Serverless para Apache Spark ou num cluster do Dataproc existente.
• Modelos Python: execute cargas de trabalho em lote do PySpark no Google Cloud Serverless para Apache Spark.
• Modelos de notebooks: execute tarefas do Spark com notebooks do Vertex AI.