Lista de versões de imagem do Cloud Dataproc

O Google Cloud Dataproc usa versões de imagem para agrupar sistemas operacionais, componentes de Big Data e conectores do Google Cloud Platform em um pacote implantado em um cluster. Para mais informações, consulte Controle de versão do Cloud Dataproc.

Versões compatíveis do Cloud Dataproc

Imagens do Debian

As seguintes versões de imagem baseadas no Debian 9 são compatíveis com os clusters do Cloud Dataproc. Novos clusters serão criados para incluir patches subsecundários que tenham sido feitos para versões depois do lançamento.

Versão Última atualização Liberada em Notas
1.4-debian9 16/05/2019 22/03/2019 Versão de disponibilidade geral.
1.3-debian9 16/05/2019 29/06/2018 Essa é a versão padrão para novos clusters a partir de 22/01/2019.
1.2-debian9 16/05/2019 21/07/2017 Essa foi a versão padrão para novos clusters de 08/08/2017 até 22/01/2019.
1.1-debian9 16/05/2019 08/08/2016 Essa versão não será mais compatível depois de 30 de setembro de 2019.

Imagens do Ubuntu

As versões de imagem a seguir baseadas no Ubuntu 18.04 LTS são compatíveis com os clusters do Cloud Dataproc. Novos clusters serão criados para incluir patches subsecundários que tenham sido feitos para versões depois do lançamento.

Versão Última atualização Liberada em Notas
1.4-ubuntu18 16/05/2019 22/03/2019
1.3-ubuntu18 16/05/2019 22/03/2019

Versões não compatíveis com o Cloud Dataproc

As seguintes versões do Cloud Dataproc não são compatíveis. O Cloud Dataproc não oferece atualizações e suporte para clusters criados com estas versões. Embora seja possível continuar a execução de um cluster que foi criado com uma versão não compatível, recomendamos a substituição do cluster por um novo cluster criado com uma versão aceita.

Versão Inclui Liberada em Última atualização Notas
1.0-debian9 Apache Spark 1.6.2
Apache Hadoop 2.7.4
Apache Pig 0.15.0
Apache Hive 1.2.1
Conector do Cloud Storage 1.6.10-hadoop2
Conector do BigQuery 0.10.11-hadoop2
22/02/2016 09/05/2019 Primeiro lançamento de imagem do GA.
Não será compatível a partir de 01/04/2019.
O 1.0.119-debian9 é a versão final lançada.
0.2 Apache Spark 1.5.2
Apache Hadoop 2.7.1
Apache Pig 0.15.0
Apache Hive 1.2.1
Conector do Cloud Storage 1.5.1-hadoop2
Conector do BigQuery 0.7.7-hadoop2
18/11/2015 02/08/2016 Imagem beta, segunda versão
0.1 Apache Spark 1.5.0
Apache Hadoop 2.7.1
Apache Pig 0.14.10
Apache Hive 1.0
Conector do Cloud Storage 1.5.1-hadoop2
Conector do BigQuery 0.7.7-hadoop2
23/09/2015 02/08/2016 Versão beta do Cloud Dataproc.
O Spark 1.5 foi compilado em relação ao Hive 1.2.