Criar um cluster do Dataproc usando um modelo

Criar um cluster do Dataproc usando um modelo

Nesta página, mostramos como usar um modelo do APIs Explorer do Google para chamar a API Dataproc e criar um cluster do Dataproc.

Para outras maneiras de criar um cluster, consulte:

• Criar um cluster do Dataproc usando o console do Google Cloud
• Criar um cluster do Dataproc usando a Google Cloud CLI
• Criar um cluster do Dataproc usando bibliotecas de cliente

Antes de começar

1. Faça login na sua conta do Google Cloud. Se você começou a usar o Google Cloud agora, crie uma conta para avaliar o desempenho de nossos produtos em situações reais. Clientes novos também recebem US$ 300 em créditos para executar, testar e implantar cargas de trabalho.

2. No console do Google Cloud, na página do seletor de projetos, selecione ou crie um projeto do Google Cloud.

   Observação: se você não pretende manter os recursos criados neste procedimento, crie um projeto novo em vez de selecionar um que já existe. Depois de concluir essas etapas, é possível excluir o projeto. Para fazer isso, basta remover todos os recursos associados a ele.

   Acessar o seletor de projetos

3. Verifique se a cobrança está ativada para o seu projeto do Google Cloud.

4. Ative a API Dataproc.

   Ative a API

5. No console do Google Cloud, na página do seletor de projetos, selecione ou crie um projeto do Google Cloud.

   Observação: se você não pretende manter os recursos criados neste procedimento, crie um projeto novo em vez de selecionar um que já existe. Depois de concluir essas etapas, é possível excluir o projeto. Para fazer isso, basta remover todos os recursos associados a ele.

   Acessar o seletor de projetos

6. Verifique se a cobrança está ativada para o seu projeto do Google Cloud.

7. Ative a API Dataproc.

   Ative a API

Criar um cluster

Antes de executar jobs do Dataproc, é necessário criar um cluster de máquinas virtuais em que eles serão executados. Para criar um cluster do Dataproc no seu projeto, preencha e execute o modelo do APIs Explorer do Google APIs Explorer.

Observação: os valores dos parâmetros region e clusterName são preenchidos por você. Aceite ou substitua esses valores de parâmetro "seed".

1. Parâmetros de solicitação:

   1. Insira seu projectId.
   2. Especifique a região em que o cluster estará localizado (aceite ou substitua "us-central1"). Como você não está especificando uma zona na região neste guia de início rápido, a posição de zona automática do Dataproc escolherá uma zona dentro da região em que o cluster será criado.

2. Corpo da solicitação:

   1. Especifique um clusterName (aceite ou substitua "example-cluster"). Esse nome será usado para interagir com o cluster, por exemplo, quando você enviar jobs ou atualizar o cluster.

3. Clique em EXECUTAR. Na primeira vez que você executar o modelo da API, talvez seja necessário escolher e fazer login na sua Conta do Google e autorizar o Google APIs Explorer a acessar sua conta. Se a solicitação for bem-sucedida, a resposta JSON mostrará que a criação do cluster está pendente.

4. Para confirmar a criação do cluster, abra a página Clusters do Dataproc no console do Google Cloud. Após a conclusão do provisionamento do cluster, o status dele será exibido como "Em execução".

Limpar

Para evitar cobranças na sua conta do Google Cloud pelos recursos usados nesta página, siga estas etapas.

1. Se você não precisar que o cluster explore os outros guias de início rápido ou execute outros jobs, use o APIs Explorer, o Console do Google Cloud, a ferramenta de linha de comando gcloud da CLI gcloud ou as bibliotecas de cliente do Cloud para excluir o cluster.

A seguir

• Aprenda a enviar um job do Spark usando um modelo.