execute um job do Spark no Google Kubernetes Engine

Envie jobs do Spark para um cluster do Google Kubernetes Engine em execução na API Dataproc Jobs.

Introdução ao Cloud Dataproc: Hadoop e Spark no Google Cloud

Este curso apresenta uma combinação de palestras, demonstrações e laboratórios práticos para criar um cluster do Dataproc, enviar um job do Spark e, em seguida, encerrar o cluster.

Machine learning com Spark no Dataproc

Este curso apresenta uma combinação de palestras, demonstrações e laboratórios práticos para implementar a regressão logística usando uma biblioteca de machine learning do Apache Spark em um cluster do Dataproc para desenvolver um modelo com dados de um conjunto de dados multivariável.

Soluções de programação de fluxo de trabalho

Programe fluxos de trabalho no Google Cloud.

Como migrar dados do HDFS do local para o Google Cloud

Como mover dados do Hadoop Distributed File System (HDFS) para o Google Cloud.

Gerenciar dependências Java e Scala para o Apache Spark

Abordagens recomendadas para incluir dependências ao enviar um job do Spark para um cluster do Dataproc.

Como usar o Apache Hive no Dataproc

Use o Apache Hive no Dataproc de maneira eficiente e flexível armazenando dados do Hive no Cloud Storage e hospedando o metastore do Hive em um banco de dados MySQL no Cloud SQL.

Amostras da API Python

Chamar APIs do Dataproc a partir do Python.

Amostras da API Java

Chame APIs do Dataproc do Java.

Amostras da API Node.js

Chame APIs do Dataproc a partir do Node.js.

Amostras da API Go

Chame APIs do Dataproc do Go.