Releaseversionen 2.2.x

Komponente 2.2.39-debian12/-ubuntu22/-rocky9
2024/10/31		 2.2.38-debian12/-ubuntu22/-rocky9
2024/10/25		 2.2.37-debian12/-ubuntu22/-rocky9
2024/10/18		 2.2.36-debian12/-ubuntu22/-rocky9
2024/10/14		 2.2.35-debian12/-ubuntu22/-rocky9
2024/10/08
Apache Atlas
Initialisierungsaktion		 2.2.0 2.2.0 2.2.0 2.2.0 2.2.0
Apache Flink
optionale Komponente		 1.17.0 1.17.0 1.17.0 1.17.0 1.17.0
Apache Hadoop
installiert		 3.3.6 3.3.6 3.3.6 3.3.6 3.3.6
Apache Hive
installiert		 3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hive WebHCat
optionale Komponente		 3.1.3 3.1.3 3.1.3 3.1.3 3.1.3
Apache Hudi
optionale Komponente		 0.15.0 0.15.0 0.15.0 0.15.0 0.15.0
Apache Kafka
Initialisierungsaktion		 3.1.0 3.1.0 3.1.0 3.1.0 3.1.0
Apache Pig
installiert		 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT 0.18.0-SNAPSHOT
Apache Spark
installiert		 3.5.1 3.5.1 3.5.1 3.5.1 3.5.1
Apache Sqoop
Initialisierungsaktion		 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT 1.5.0-SNAPSHOT
Apache Tez
installiert		 0.10.2 0.10.2 0.10.2 0.10.2 0.10.2
BigQuery-Connector
ist installiert		 0.34.0 0.34.0 0.34.0 0.34.0 0.34.0
Cloud Storage-Connector
installiert		 3.0.2 3.0.2 3.0.2 3.0.2 3.0.2
Conscrypt
installiert		 2.5.2 2.5.2 2.5.2 2.5.2 2.5.2
Docker
optionale Komponente		 24.0 24.0 24.0 24.0 24.0
Hue
Initialisierungsaktion		 4.11.0 4.11.0 4.11.0 4.11.0 4.11.0
Java
ist installiert		 11 11 11 11 11
JupyterLab Notebook
optionale Komponente		 3.6 3.6 3.6 3.6 3.6
Oozie
Initialisierungsaktion		 5.2.1 5.2.1 5.2.1 5.2.1 5.2.1
Python
installiert		 conda 23.11.0 mit Python 3.11 conda 23.11.0 mit Python 3.11 conda 23.11.0 mit Python 3.11 conda 23.11.0 mit Python 3.11 conda 23.11.0 mit Python 3.11
R
installiert		 R 4.2 R 4.2 R 4.2 R 4.2 R 4.2
Ranger
optionale Komponente		 2.4.0 2.4.0 2.4.0 2.4.0 2.4.0
Scala
installiert		 2.12.18 2.12.18 2.12.18 2.12.18 2.12.18
Solr
optionale Komponente		 9.2.1 9.2.1 9.2.1 9.2.1 9.2.1
Trino
optionale Komponente		 432 432 432 432 432
Optionale
Zeppelin NotebookKomponente		 0.10.1 0.10.1 0.10.1 0.10.1 0.10.1
Zookeeper
optionale Komponente		 3.8.3 3.8.3 3.8.3 3.8.3 3.8.3

Bekannte Probleme und Einschränkungen der Image-Version 2.2:

  • Data Lineage ist nicht verfügbar, da Spark 3.5 die Erhebung von Daten zu Datenabfolgen nicht unterstützt.
  • Legacy-Agents werden in Clustern mit der Image-Version 2.2 nicht installiert. monitoring-agent-defaults ist nur verfügbar, wenn der Ops-Agent installiert ist. Hinweis: OSS-Messwerte und ‑Protokolle sind für Dataproc-Komponenten verfügbar.
    • Logging oder Monitoring für Drittanbieteranwendungen ist nur verfügbar, wenn der Ops-Agent installiert ist.

Hinweise:

  • Der Quellcode für Image 2.2-Bibliotheken, die unter wechselseitigen und eingeschränkten Lizenzen lizenziert sind, ist auf Dataproc-Cluster-VMs unter dem Pfad /usr/local/share/google/dataproc/third-party-sources verfügbar.
  • Die folgenden Hudi-Vorgänge funktionieren nicht mit einer Hudi-Tabelle, die vom Cloud Storage-Dateisystem unterstützt wird:
    • run_clustering
    • run_compaction