Lista de versiones de imágenes de Dataproc

Google Dataproc usa versiones de imágenes para agrupar el sistema operativo, los componentes de macrodatos y los conectores de Google Cloud Platform en un paquete implementado en un clúster. Para obtener más información, consulta Control de versiones de Dataproc.

Versiones compatibles de Dataproc

Imágenes de Debian

Las siguientes versiones de imagen basadas en Debian 10 son compatibles con los clústeres de Dataproc. Ten en cuenta que se crearán nuevos clústeres para incluir cualquier parche de menor importancia que se haya realizado en una versión desde su lanzamiento.

Versión Última actualización Lanzamiento Notas
preview-debian10 2020/10/06 2020/06/11 Versión preliminar
1.5-debian10 2020/10/06 25/03/2020 Esta es la versión de disponibilidad general.
1.4-debian10 2020/10/06 22/03/2019 Esta es la versión de disponibilidad general.
1.3-debian10 2020/10/06 29/06/2018 Esta es la versión de disponibilidad general.

Imágenes de Ubuntu

Las siguientes versiones de imágenes basadas en Ubuntu 18.04 LTS son compatibles en los clústeres de Dataproc. Ten en cuenta que se crearán nuevos clústeres para incluir cualquier parche de menor importancia que se haya realizado en una versión desde su lanzamiento.

Versión Última actualización Lanzamiento Notas
preview-ubuntu18 2020/10/06 2020/06/11 Versión preliminar
1.5-ubuntu18 2020/10/06 25/03/2020 Esta es la versión de disponibilidad general.
1.4-ubuntu18 2020/10/06 22/03/2019 Esta es la versión de disponibilidad general.
1.3-ubuntu18 2020/10/06 22/03/2019 Esta es la versión de disponibilidad general.

Versiones de Dataproc no compatibles

Las siguientes versiones de Dataproc no son compatibles. Dataproc no proporciona actualizaciones ni asistencia para los clústeres creados con estas versiones. Aunque puedes continuar ejecutando un clúster que se creó con una versión no compatible, se recomienda reemplazar el clúster por uno nuevo creado con una versión compatible.

Versión Incluye Lanzamiento Última actualización Notas
1.4-debian9 Apache Spark 2.4.5
Apache Hadoop 2.9.2
Apache Pig 0.17.0
Apache Hive 2.3.7
Conector de Cloud Storage 1.9.17-hadoop2
Python 3.6
Scala 2.11.12
Zookeeper 3.4.13
 2019/03/22 2020/07/10 No es compatible desde el 10/07/2020.
1.4.33-debian9 es la última versión publicada.
1.3-debian9 Apache Spark 2.3.4
Apache Hadoop 2.9.2
Apache Pig 0.17.0
Apache Hive 2.3.7
Conector de Cloud Storage 1.9.17-hadoop2
Python 2.7
Scala 2.11.8
Zookeeper 3.4.13
 29/06/2018 2020/07/10 No es compatible desde el 10/07/2020.
1.3.62-debian9 fue la última versión publicada.
1.2-debian9 Apache Spark 2.3.3
Apache Hadoop 2.8.5
Apache Pig 0.16.0
Apache Hive 2.1.1
conector de Cloud Storage 1.6.10-hadoop2
Conector de BigQuery 0.10.11-hadoop2
Python 2.7
Scala 2.11.8
Zookeeper 3.4.13
 2017/07/21 2020/07/10 No es compatible desde el 10/07/2020.
1.2.102-debian9 es la última versión publicada.
1.1-debian9 Apache Spark 2.0.2
Apache Hadoop 2.7.7
Apache Pig 0.16.0
Apache Hive 2.1.1
Conector de Cloud Storage 1.6.10-hadoop2
Conector de BigQuery 0.10.11-hadoop2		 08/08/2016 26/09/2019 No es compatible desde el 01/10/2019.
1.1.21-debian9 es la última versión publicada.
1.0-debian9 Apache Spark 1.6.2
Apache Hadoop 2.7.4
Apache Pig 0.15.0
Apache Hive 1.2.1
Conector de Cloud Storage 1.6.10-hadoop2
Conector de BigQuery 0.10.11-hadoop2		 22/022016 05/09/2019 Primera actualización de la imagen de Google Analytics.
No se admite a partir de 01/04/2019.
1.0.119-debian9 fue la última versión publicada.
0.2 Apache Spark 1.5.2
Apache Hadoop 2.7.1
Apache Pig 0.15.0
Apache Hive 1.2.1
Conector de Cloud Storage 1.5.1-hadoop2
Conector de BigQuery 0.7.7-hadoop2		 18/11/2015 02/08/2016 Segunda versión de la imagen Beta.
0.1 Apache Spark 1.5.0
Apache Hadoop 2.7.1
Apache Pig 0.14.10
Apache Hive 1.0
Conector de Cloud Storage 1.5.1-hadoop2
Conector de BigQuery 0.7.7-hadoop2		 23/09/2015 02/08/2016 Versión Beta de Dataproc.
Spark 1.5 se compiló con Hive 1.2