Versions 2.1.x

Composant 2.1.60-debian11/-ubuntu20/-ubuntu20-arm/-rocky8
2024/07/18
2.1.59-debian11/-ubuntu20/-ubuntu20-arm/-rocky8
2024/07/12
2.1.58-debian11/-ubuntu20/-ubuntu20-arm/-rocky8
2024/07/08
2.1.57-debian11/-ubuntu20/-ubuntu20-arm/-rocky8
2024/07/03
2.1.56-debian11/-ubuntu20/-ubuntu20-arm/-rocky8
2024/06/28
Apache Atlas
action d'initialisation
2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Apache Flink
composant facultatif
1.15.4 1.15.4 1.15.4 1.15.4 1.15.4
Apache Hadoop
installé
3.3.6 3.3.6 3.3.6 3.3.6 3.3.6
Apache Hive
installé
3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hive WebHCat
composant facultatif
3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hudi
composant facultatif
0.12.3 0.12.3 0.12.3 0.12.3 0.12.3
Apache Kafka
action d'initialisation
3.1.0 3.1.0 3.1.0 3.1.0 3.1.0
Apache Pig
installé
0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT
Apache Spark
installé
3.3.2 3.3.2 3.3.2 3.3.2 3.3.2
Apache Sqoop
action d'initialisation
1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT
Apache Tez
installé
0.10.2 0.10.2 0.10.2 0.10.2 0.10.2
Connecteur BigQuery
installé
0.27.1 0.27.1 0.27.1 0.27.1 0.27.1
Connecteur Cloud Storage
installé
hadoop3-2.2.20 hadoop3-2.2.20 hadoop3-2.2.20 hadoop3-2.2.20 hadoop3-2.2.20
Conscrypt
installé
2.5.2 2.5.2 2.5.2 2.5.2 2.5.2
Docker
composant facultatif
20,10 20,10 20,10 20,10 20,10
Hue
action d'initialisation
4.10.0 4.10.0 4.10.0 4.10.0 4.10.0
Java
installé
11 11 11 11 11
Notebook JupyterLab
composant facultatif
3,4 3,4 3,4 3,4 3,4
Oozie
action d'initialisation
5.2.1 5.2.1 5.2.1 5.2.1 5.2.1
Python
installé
conda 22.9.0 avec Python 3.10 conda 22.9.0 avec Python 3.10 conda 22.9.0 avec Python 3.10 conda 22.9.0 avec Python 3.10 conda 22.9.0 avec Python 3.10
R
installé
R 4.1 R 4.1 R 4.1 R 4.1 R 4.1
Ranger
composant facultatif
2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Scala
installé
2.12.18 2.12.18 2.12.18 2.12.18 2.12.18
Solr
composant facultatif
9.0.0 9.0.0 9.0.0 9.0.0 9.0.0
Trino
Trino
376 376 376 376 376
Notebook Zeppelin
composant facultatif
0.10.1 0.10.1 0.10.1 0.10.1 0.10.1
Zookeeper
composant facultatif
3.8.3 3.8.3 3.8.3 3.8.3 3.8.3

Remarques:

  1. 2.1.x-*-arm images ne prennent en charge que les composants installés et les composants facultatifs (les 2.1 autres composants facultatifs et actions d'initialisation non compatibles):
    • Apache Hive WebHCat
    • Docker
    • ZooKeeper (installé dans des clusters haute disponibilité) (un composant facultatif dans les clusters standards)
  2. Les installations Apache Hive sur des clusters Dataproc incluent HCatalog mais n'incluent pas Hive WebHCat (consultez les Composant Hive WebHCat facultatif pour installer Hive WebHCat sur un cluster).
  3. [Composant Presto facultatif](/dataproc/docs/concepts/components/presto) est disponible en tant que composant Trino facultatif. dans les versions d'image 2.1 et ultérieures.
  4. Les composants HBase et Druid ne sont pas compatibles avec les images 2.1 et ultérieures. versions.
  5. Le code source des bibliothèques d'images 2.1 sous licence Reciprocal et l'option "Licences limitées" est disponible Chemin d'accès de /usr/local/share/google/dataproc/third-party-sources sur des VM de cluster Dataproc.