É possível instalar outros componentes, como o Zookeeper, ao criar um Dataproc cluster usando o Componentes opcionais . Esta página descreve o componente Zookeeper.
O Apache Zookeeper é um serviço centralizado que fornece sincronização distribuída de dados.
Instalar o componente
Instale o componente ao criar um cluster do Dataproc.
Consulte Versões compatíveis do Dataproc para a versão do componente incluída em cada versão de imagem do Dataproc.
Comando gcloud
Para criar um cluster do Dataproc que inclua o componente Zookeeper, use o comando gcloud dataproc clusters create cluster-name com a sinalização --optional-components (usando a versão 1.0 ou posterior da imagem).
gcloud dataproc clusters create cluster-name \ --optional-components=ZOOKEEPER \ --region=region \ ... other flags
API REST
O componente Zookeeper pode ser especificado por meio de API do Dataproc usando SoftwareConfig.Component como parte de uma solicitação clusters.create.Console
- Ativar o componente.
- No console do Google Cloud, abra o Dataproc Criar um cluster página. O painel "Configurar cluster" está selecionado.
- Na seção "Componentes", em "Componentes opcionais", selecione Zookeeper e outros componentes opcionais para instalar no cluster.