Versions 2.2.x

Composant 2.2.37-debian12/-ubuntu22/-rocky9
2024/10/18		 2.2.36-debian12/-ubuntu22/-rocky9
2024/10/14		 2.2.35-debian12/-ubuntu22/-rocky9
2024/10/08		 2.2.34-debian12/-ubuntu22/-rocky9
2024/09/30
Liste de blocage		 2.2.33-debian12/-ubuntu22/-rocky9
2024/09/21
Liste de blocage
Apache Atlas
action d'initialisation		 2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Apache Flink
composant facultatif		 1.17.0 1.17.0 1.17.0 1.17.0 1.17.0
Apache Hadoop
installé		 3.3.6 3.3.6 3.3.6 3.3.6 3.3.6
Apache Hive
installé		 3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hive WebHCat
composant facultatif		 3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hudi
composant facultatif		 0.15.0 0.15.0 0.15.0 0.15.0 0.15.0
Apache Kafka
action d'initialisation		 3.1.0 3.1.0 3.1.0 3.1.0 3.1.0
Apache Pig
installé		 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT
Apache Spark
installé		 3.5.1 3.5.1 3.5.1 3.5.1 3.5.1
Apache Sqoop
action d'initialisation		 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT
Apache Tez
installé		 0.10.2 0.10.2 0.10.2 0.10.2 0.10.2
Connecteur BigQuery
installé		 0.34.0 0.34.0 0.34.0 0.34.0 0.34.0
Connecteur Cloud Storage
installé		 3.0.2 3.0.2 3.0.2 3.0.2 3.0.2
Conscrypt
installé		 2.5.2 2.5.2 2.5.2 2.5.2 2.5.2
Docker
composant facultatif		 24,0 24,0 24,0 24,0 24,0
Hue
action d'initialisation		 4.11.0 4.11.0 4.11.0 4.11.0 4.11.0
Java
installé		 11 11 11 11 11
Notebook JupyterLab
composant facultatif		 3.6 3,6 3,6 3,6 3.6
Oozie
action d'initialisation		 5.2.1 5.2.1 5.2.1 5.2.1 5.2.1
Python
installé		 conda 23.11.0 avec Python 3.11 conda 23.11.0 avec Python 3.11 conda 23.11.0 avec Python 3.11 conda 23.11.0 avec Python 3.11 conda 23.11.0 avec Python 3.11
R
installé		 R 4.2 R 4.2 R 4.2 R 4.2 R 4.2
Ranger
composant facultatif		 2.4.0 2.4.0 2.4.0 2.4.0 2.4.0
Scala
installé		 2.12.18 2.12.18 2.12.18 2.12.18 2.12.18
Solr
composant facultatif		 9.2.1 9.2.1 9.2.1 9.2.1 9.2.1
Trino
Trino		 432 432 432 432 432
Notebook Zeppelin
composant facultatif		 0.10.1 0.10.1 0.10.1 0.10.1 0.10.1
Zookeeper
composant facultatif		 3.8.3 3.8.3 3.8.3 3.8.3 3.8.3

Problèmes et limites connus de la version d'image 2.2 :

  • La traçabilité des données n'est pas disponible car Spark 3.5 n'est pas compatible avec la collecte de données de traçabilité.
  • Les anciens agents ne sont pas installés dans les clusters de la version d'image 2.2. monitoring-agent-defaults ne sont disponibles que si l'Agent Ops est installé. Remarque : Les métriques et la journalisation OSS sont disponibles pour les composants Dataproc.
    • La journalisation ou la surveillance des applications tierces n'est pas disponible, sauf si l'agent Ops est installé.

Remarques :

  • Le code source des bibliothèques d'images 2.2 sous licence réciproque et limitée est disponible sur le chemin d'accès /usr/local/share/google/dataproc/third-party-sources sur les VM de cluster Dataproc.
  • Les procédures Hudi suivantes ne fonctionnent pas sur une table Hudi basée sur le système de fichiers Cloud Storage :
    • run_clustering
    • run_compaction