Bekannte Probleme und Einschränkungen der Image-Version 2.2:
- Data Lineage ist nicht verfügbar da Spark 3.5 die Sammlung von Lineage-Daten nicht unterstützt.
- Legacy-Agents sind in Clustern der Image-Version 2.2 nicht installiert.
monitoring-agent-defaults
sind nur mit dem Ops-Agent verfügbar
installiert ist. Hinweis: OSS-Messwerte und ‑Protokolle sind für Dataproc-Komponenten verfügbar.
- Logging oder Monitoring für Drittanbieteranwendungen ist nur verfügbar, wenn der Ops-Agent installiert ist.
Hinweise:
- Der Quellcode für Image 2.2-Bibliotheken, die gemäß wechselseitiger Lizenz und eingeschränkter Lizenz lizenziert sind, ist auf Dataproc-Cluster-VMs unter dem Pfad
/usr/local/share/google/dataproc/third-party-sources
verfügbar. - Die folgenden Hudi-Verfahren
funktionieren bekanntermaßen nicht bei einer Hudi-Tabelle, die vom Cloud Storage-Dateisystem unterstützt wird:
run_clustering
run_compaction