Liste der Dataproc-Image-Versionen

Google Dataproc verwendet Image-Versionen, um das Betriebssystem, Big-Data-Komponenten und Google Cloud Platform-Connectors in einem Paket zu bündeln, das auf einem Cluster bereitgestellt wird. Weitere Informationen finden Sie unter Dataproc-Versionsverwaltung.

Unterstützte Dataproc-Versionen

Debian-Images

Dataproc-Cluster unterstützen folgende auf Debian 10 basierende Image-Versionen. Beachten Sie, dass neue Cluster erstellt werden, um etwaige Sub-Minor-Patches einzubeziehen, die seit der Veröffentlichung einer Version erstellt wurden.

Version Zuletzt aktualisiert Veröffentlicht am Hinweise
preview-debian10 06.10.2020 11.06.2020 Vorschaurelease
1.5-debian10 06.10.2020 25.03.2020 Release mit allgemeiner Verfügbarkeit
1.4-debian10 06.10.2020 22.03.2019 Release mit allgemeiner Verfügbarkeit
1.3-debian10 06.10.2020 29.06.2018 Release mit allgemeiner Verfügbarkeit

Ubuntu-Images

Die folgenden Ubuntu 18.04 LTS-basierten Image-Versionen werden in Dataproc-Clustern unterstützt. Beachten Sie, dass neue Cluster erstellt werden, um etwaige Sub-Minor-Patches einzubeziehen, die seit der Veröffentlichung einer Version erstellt wurden.

Version Zuletzt aktualisiert Veröffentlicht am Hinweise
preview-ubuntu18 06.10.2020 11.06.2020 Vorschaurelease
1.5-ubuntu18 06.10.2020 25.03.2020 Release mit allgemeiner Verfügbarkeit
1.4-ubuntu18 06.10.2020 22.03.2019 Release mit allgemeiner Verfügbarkeit
1.3-ubuntu18 06.10.2020 22.03.2019 Release mit allgemeiner Verfügbarkeit

Nicht unterstützte Dataproc-Versionen

Folgende Dataproc-Versionen werden nicht unterstützt. Dataproc bietet keine Aktualisierungen und keine Unterstützung für Cluster, die mit diesen Versionen erstellt wurden. Sie können weiterhin einen Cluster ausführen, der mit einer nicht unterstützten Version erstellt wurde. Es wird jedoch empfohlen, den Cluster durch einen neuen Cluster zu ersetzen, der mit einer unterstützten Version erstellt wurde.

Version Umfasst Veröffentlicht am Zuletzt aktualisiert Hinweise
1.4-debian9 Apache Spark 2.4.5
Apache Hadoop 2.9.2
Apache Pig 0.17.0
Apache Hive 2.3.7
Cloud Storage-Connector 1.9.17-hadoop2
Python 3.6
Scala 2.11.12
Zookeeper 3.4.13
 22.03.2019 10.07.2020 Seit 10.07.2020 nicht mehr unterstützt.
1.4.33-debian9 war die letzte veröffentlichte Version.
1.3-debian9 Apache Spark 2.3.4
Apache Hadoop 2.9.2
Apache Pig 0.17.0
Apache Hive 2.3.7
Cloud Storage-Connector 1.9.17-hadoop2
Python 2.7
Scala 2.11.8
Zookeeper 3.4.13
 29.06.2018 10.07.2020 Seit 10.07.2020 nicht mehr unterstützt.
1.3.62-debian9 war die letzte veröffentlichte Version.
1.2-debian9 Apache Spark 2.2.3
Apache Hadoop 2.8.5
Apache Pig 0.16.0
Apache Hive 2.1.1
Cloud Storage-Connector 1.6.10-hadoop2
BigQuery-Connector 0.10.11-hadoop2
Python 2.7
Scala 2.11.8
Zookeeper 3.4.13
 21.07.2017 10.07.2020 Wird seit 10.07.2020 nicht mehr unterstützt.
1.2.102-debian9 war die letzte veröffentlichte Version.
1.1-debian9 Apache Spark 2.0.2
Apache Hadoop 2.7.7
Apache Pig 0.16.0
Apache Hive 2.1.1
Cloud Storage-Connector 1.6.10-hadoop2
BigQuery-Connector 0.10.11-hadoop2		 08.08.2016 26.09.2019 Wird seit 01.10.2019 nicht mehr unterstützt.
1.1.121-debian9 ist die letzte veröffentlichte Version.
1.0-debian9 Apache Spark 1.6.2
Apache Hadoop 2.7.4
Apache Pig 0.15.0
Apache Hive 1.2.1
Cloud Storage-Connector 1.6.10-hadoop2
BigQuery-Connector 0.10.11-hadoop2		 22.02.2016 09.05.2019 Erste Veröffentlichung des GA-Images.
Seit dem 1. April 2019 nicht mehr unterstützt.
1.0.119-debian9 war die endgültige Version.
0.2 Apache Spark 1.5.2
Apache Hadoop 2.7.1
Apache Pig 0.15.0
Apache Hive 1.2.1
Cloud Storage-Connector 1.5.1-hadoop2
BigQuery-Connector 0.7.7-hadoop2		 18.11.2015 2.8.2016 Beta-Image zweites Release
0.1 Apache Spark 1.5.0
Apache Hadoop 2.7.1
Apache Pig 0.14.10
Apache Hive 1.0
Cloud Storage-Connector 1.5.1-hadoop2
BigQuery-Connector 0.7.7-hadoop2		 23.9.2015 2.8.2016 Dataproc-Betarelease.
Spark 1.5 wurde basierend auf Hive 1.2 kompiliert.