Google Dataproc usa versiones de imágenes de Ubuntu, Debian y Rocky Linux para agrupar el sistema operativo, los componentes de Big Data y los Google Cloud conectores en un paquete que se despliega en un clúster. Para obtener más información, consulta Gestión de versiones de Dataproc.
Notas:
- Las versiones de imagen de Dataproc se admiten durante 24 meses después de su lanzamiento inicial.
- Por lo general, las versiones de imagen de Dataproc están disponibles durante 24 meses después de la fecha de finalización del soporte, pero el periodo de disponibilidad puede acortarse si se amplía la fecha de soporte de una imagen.
Versión de imagen de Dataproc predeterminada
Dataproc actualiza la versión de imagen predeterminada a la versión de Dataproc basada en Debian más reciente disponible para el público general después de la fecha de lanzamiento de la versión disponible para el público general.
Versiones de imagen de Dataproc compatibles
Imágenes de Debian
En los clústeres de Dataproc se admiten las siguientes versiones de imagen basadas en Debian. Ten en cuenta que se crearán clústeres para incluir los parches de subversión que se hayan aplicado a una versión desde su lanzamiento.
Versión | Última actualización | Fecha de lanzamiento | Compatible hasta | Disponible hasta el | Notas |
---|---|---|---|---|---|
3.0-debian12 | 2025/09/08 | 2025/09/08 | Por determinar | Por determinar | Versión preliminar. |
2.3-debian12 | 2025/09/08 | 2025/09/06 | 09/06/2027 | 09/06/2029 | Lanzamiento al público general. |
2.2-debian12 | 29/08/2025 | 08/12/2023 | 2027/03/31 | 31/12/2027 | Lanzamiento al público general. La versión 2.2 de la imagen se convertirá en la versión predeterminada el 13 de septiembre del 2024. |
2.1-debian11 | 29/08/2025 | 12/12/2022 | 31/03/2026 | 31/12/2026 | Lanzamiento al público general. |
2.0-debian10 | 29/08/2025 | 2021/01/22 | 2025/09/30 | 31/07/2026 | Lanzamiento al público general. |
Imágenes de Ubuntu
En los clústeres de Dataproc se admiten las siguientes versiones de imagen basadas en Ubuntu LTS. Ten en cuenta que los nuevos clústeres se crearán para incluir los parches secundarios que se hayan aplicado a una versión desde su lanzamiento.
Versión | Última actualización | Fecha de lanzamiento | Compatible hasta | Disponible hasta el | Notas |
---|---|---|---|---|---|
3.0-ubuntu24 | 2025/09/08 | 2025/09/08 | Por determinar | Por determinar | Versión preliminar. |
2.3-ubuntu22 | 2025/09/08 | 2025/09/06 | 09/06/2027 | 09/06/2029 | Lanzamiento al público general. |
2.2-ubuntu22 | 29/08/2025 | 08/12/2023 | 2027/03/31 | 31/12/2027 | Lanzamiento al público general. |
2.1-ubuntu20 | 29/08/2025 | 12/12/2022 | 31/03/2026 | 31/12/2026 | Lanzamiento al público general. |
2.0-ubuntu18 | 29/08/2025 | 2021/01/22 | 2025/09/30 | 31/07/2026 | Lanzamiento al público general. |
Imágenes de Rocky Linux
En los clústeres de Dataproc se admiten las siguientes versiones de imagen basadas en Rocky Linux. Ten en cuenta que los nuevos clústeres se crearán para incluir los parches secundarios que se hayan aplicado a una versión desde su lanzamiento.
Versión | Última actualización | Fecha de lanzamiento | Compatible hasta | Disponible hasta el | Notas |
---|---|---|---|---|---|
3.0-rocky9 | 2025/09/08 | 2025/09/08 | Por determinar | Por determinar | Versión preliminar. |
2.3-rocky9 | 2025/09/08 | 2025/09/06 | 09/06/2027 | 09/06/2029 | Lanzamiento al público general. |
2.2-rocky9 | 29/08/2025 | 08/12/2023 | 2027/03/31 | 31/12/2027 | Lanzamiento al público general. |
2.1-rocky8 | 29/08/2025 | 12/12/2022 | 31/03/2026 | 31/12/2026 | Lanzamiento al público general. |
2.0-rocky8 | 29/08/2025 | 18/02/2022 | 2025/09/30 | 31/07/2026 | Lanzamiento al público general. |
Versiones de imagen de Dataproc no admitidas
Las siguientes versiones de Dataproc no son compatibles. Dataproc no proporciona actualizaciones ni asistencia para los clústeres creados con estas versiones. Aunque puedes seguir ejecutando un clúster que se haya creado con una versión no compatible, te recomendamos que lo sustituyas por un clúster nuevo creado con una versión compatible.
Versión | Incluye | Fecha de lanzamiento | Última actualización | Notas |
---|---|---|---|---|
1.5-debian10/-ubuntu18/-rocky8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Conector de Cloud Storage 2.1.9-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
2020/03/25:debian10/ubuntu18 2022/02/18:rocky8 |
28/04/2023 | No compatible desde el 28/04/2023. 1.5.89-debian10/-ubuntu18/-rocky8 fue la última versión lanzada. |
2.0-centos8 |
Apache Spark 3.1.2 Apache Hadoop 3.2.2 Apache Pig 0.18.0-SNAPSHOT Apache Hive 3.1.2 Conector de Cloud Storage 2.2.4-hadoop3 Python 3.8 Scala 2.12.14 Zookeeper 3.4.14 |
2021/03/16 | 01/02/2022 | No compatible desde el 1 de febrero del 2022. La versión final publicada fue la 2.0.30-centos8. |
1.5-centos8 |
Apache Spark 2.4.8 Apache Hadoop 2.10.1 Apache Pig 0.17.0 Apache Hive 2.3.7 Conector de Cloud Storage 2.1.5-hadoop2 Python 3.7 Scala 2.12.10 Zookeeper 3.4.14 |
14/12/2020 | 01/02/2022 | No disponible desde el 1 de febrero del 2022. La versión final lanzada fue la 1.5.56-centos8. |
1.4-debian10/-ubuntu18 |
Apache Spark 2.4.8 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 1.9.18-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.14 |
2019/03/22 | 01/02/2022 | No compatible desde el 1 de febrero del 2022. 1.4.80-debian10/-ubuntu18 fue la última versión lanzada. |
1.3-debian10/-ubuntu18 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 conector de Cloud Storage 1.9.18-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
29/06/2018 | 22/12/2021 | No compatible desde el 1 de agosto del 2021. 1.3.95-debian10/-ubuntu18 fue la última versión lanzada, que tiene vulnerabilidades de log4j2 resueltas. Nota: Las versiones publicadas anteriormente son vulnerables y deben actualizarse. |
1.4-debian9 |
Apache Spark 2.4.5 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 Cloud Storage connector 1.9.17-hadoop2 Python 3.6 Scala 2.11.12 Zookeeper 3.4.13 |
2019/03/22 | 10/07/2020 | No compatible desde el 10/07/2020. 1.4.33-debian9 fue la última versión publicada. |
1.3-debian9 |
Apache Spark 2.3.4 Apache Hadoop 2.9.2 Apache Pig 0.17.0 Apache Hive 2.3.7 conector de Cloud Storage 1.9.17-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
29/06/2018 | 10/07/2020 | No compatible desde el 10/07/2020. 1.3.62-debian9 fue la última versión publicada. |
1.2-debian9 |
Apache Spark 2.2.3 Apache Hadoop 2.8.5 Apache Pig 0.16.0 Apache Hive 2.1.1 Conector de Cloud Storage 1.6.10-hadoop2 Conector de BigQuery 0.10.11-hadoop2 Python 2.7 Scala 2.11.8 Zookeeper 3.4.13 |
21/07/2017 | 10/07/2020 | No compatible desde el 10/07/2020. 1.2.102-debian9 fue la última versión lanzada. |
1.1-debian9 |
Apache Spark 2.0.2 Apache Hadoop 2.7.7 Apache Pig 0.16.0 Apache Hive 2.1.1 Cloud Storage connector 1.6.10-hadoop2 BigQuery connector 0.10.11-hadoop2 |
2016/08/08 | 2019/09/26 | No compatible desde el 1 de octubre del 2019. 1.1.121-debian9 es la última versión lanzada. |
1.0-debian9 |
Apache Spark 1.6.2 Apache Hadoop 2.7.4 Apache Pig 0.15.0 Apache Hive 1.2.1 Conector de Cloud Storage 1.6.10-hadoop2 Conector de BigQuery 0.10.11-hadoop2 |
2016/02/22 | 2019/05/09 | Primera versión de la imagen disponible para el público general. No compatible desde el 1/4/2019. La versión final lanzada fue la 1.0.119-debian9. |
0.2 |
Apache Spark 1.5.2 Apache Hadoop 2.7.1 Apache Pig 0.15.0 Apache Hive 1.2.1 conector de Cloud Storage 1.5.1-hadoop2 conector de BigQuery 0.7.7-hadoop2 |
2015/11/18 | 2016/08/02 | Segunda versión de la imagen beta. |
0.1 |
Apache Spark 1.5.0 Apache Hadoop 2.7.1 Apache Pig 0.14.10 Apache Hive 1.0 Conector de Cloud Storage 1.5.1-hadoop2 Conector de BigQuery 0.7.7-hadoop2 |
2015/09/23 | 2016/08/02 | Versión beta de Dataproc. Spark 1.5 se ha compilado con Hive 1.2. |