Versões de lançamento 2.2.x

Componente	2.2.39-debian12/-ubuntu22/-rocky9 2024/10/31	2.2.38-debian12/-ubuntu22/-rocky9 2024/10/25	2.2.37-debian12/-ubuntu22/-rocky9 2024/10/18	2.2.36-debian12/-ubuntu22/-rocky9 2024/10/14	2.2.35-debian12/-ubuntu22/-rocky9 2024/10/08
Apache Atlas ^ação de inicialização	2.2.0	2.2.0	2.2.0	2.2.0	2.2.0
Apache Flink ^componente opcional	1.17.0	1.17.0	1.17.0	1.17.0	1.17.0
Apache Hadoop ^instalado	3.3.6	3.3.6	3.3.6	3.3.6	3.3.6
Apache Hive ^instalado	3.1.3	3.1.3	3.1.3	3.1.3	3.1.3
Apache Hive WebHCat ^componente opcional	3.1.3	3.1.3	3.1.3	3.1.3	3.1.3
Apache Hudi ^componente opcional	0.15.0	0.15.0	0.15.0	0.15.0	0.15.0
Apache Kafka ^ação de inicialização	3.1.0	3.1.0	3.1.0	3.1.0	3.1.0
Apache Pig ^instalado	0.18.0-SNAPSHOT	0.18.0-SNAPSHOT	0.18.0-SNAPSHOT	0.18.0-SNAPSHOT	0.18.0-SNAPSHOT
Apache Spark ^instalado	3.5.1	3.5.1	3.5.1	3.5.1	3.5.1
Apache Sqoop ^ação de inicialização	1.5.0-SNAPSHOT	1.5.0-SNAPSHOT	1.5.0-SNAPSHOT	1.5.0-SNAPSHOT	1.5.0-SNAPSHOT
Apache Tez ^instalado	0.10.2	0.10.2	0.10.2	0.10.2	0.10.2
Conector do BigQuery ^instalado	0.34.0	0.34.0	0.34.0	0.34.0	0.34.0
Cloud Storage Connector ^instalado	3.0.2	3.0.2	3.0.2	3.0.2	3.0.2
Conscrypt ^instalado	2.5.2	2.5.2	2.5.2	2.5.2	2.5.2
Docker ^componente opcional	24.0	24.0	24.0	24.0	24.0
Hue ^ação de inicialização	4.11.0	4.11.0	4.11.0	4.11.0	4.11.0
Java ^instalado	11	11	11	11	11
Notebook JupyterLab ^componente opcional	3.6	3.6	3.6	3.6	3.6
Oozie ^ação de inicialização	5.2.1	5.2.1	5.2.1	5.2.1	5.2.1
Python ^instalado	conda 23.11.0 com Python 3.11	conda 23.11.0 com Python 3.11	conda 23.11.0 com Python 3.11	conda 23.11.0 com Python 3.11	conda 23.11.0 com Python 3.11
R ^instalado	R 4.2	R 4.2	R 4.2	R 4.2	R 4.2
Ranger ^componente opcional	2.4.0	2.4.0	2.4.0	2.4.0	2.4.0
Scala ^instalado	2.12.18	2.12.18	2.12.18	2.12.18	2.12.18
Solr ^componente opcional	9.2.1	9.2.1	9.2.1	9.2.1	9.2.1
Trino ^componente opcional	432	432	432	432	432
Notebook Zeppelin ^componente opcional	0.10.1	0.10.1	0.10.1	0.10.1	0.10.1
Zookeeper ^componente opcional	3.8.3	3.8.3	3.8.3	3.8.3	3.8.3

Problemas e limitações conhecidos da versão 2.2 da imagem:

• A linhagem de dados não está disponível, porque o Spark 3.5 não oferece suporte à coleta de dados de linhagem.
• Os agentes legados não são instalados em clusters da versão 2.2 da imagem. monitoring-agent-defaults não estão disponíveis, a menos que o Agente de operações esteja instalado. Observação: as métricas e o registro do OSS estão disponíveis para componentes do Dataproc.
  • A criação de log ou o monitoramento de aplicativos de terceiros não estão disponíveis a menos que o Agente de operações esteja instalado.

Observações:

• O código-fonte para as bibliotecas de imagem 2.2 licenciadas sob licenças recíprocas e restritas está disponível no caminho /usr/local/share/google/dataproc/third-party-sources em VMs de cluster do Dataproc.
• Os seguintes procedimentos do Hudi não funcionam em uma tabela do Hudi com suporte do sistema de arquivos do Cloud Storage:
  • run_clustering
  • run_compaction