Dataproc Serverless-Spark-Laufzeitversionen

Spark-Laufzeitversion 2.2

Komponente 2.2.25
2024/09/30		 2.2.23
2024/09/23
 2.2.22
2024/09/13		 2.2.21
2024/08/22		 2.2.20
2024/08/15
Apache SparkHinweis 1 3.5.1 3.5.1 3.5.1 3.5.1 3.5.1
Cloud Storage-Connector 3.0.0 3.0.0 3.0.0 3.0.0 3.0.0
BigQuery-Connector 0.36.4 0.36.4 0.36.4 0.36.4 0.36.4
Java 17 17 17 17 17
Conda 24.1 24.1 24,1 24,1 24.1
Python 3,12 3,12 3,12 3,12 3,12
R 4.3 4,30 4.3 4,30 4,30
Scala 2,13 2,13 2.13 2,13 2,13

Spark-Laufzeitversion 1.2

Komponente 1.2.25
30.09.2024		 1.2.23
23.09.2024
 1.2.22
2024/09/13		 1.2.21
2024/08/22		 1.2.20
2024/08/15
Apache SparkHinweis 1 3.5.1 3.5.1 3.5.1 3.5.1 3.5.1
Cloud Storage-Connector 3.0.0 3.0.0 3.0.0 3.0.0 3.0.0
BigQuery-Connector 0.36.4 0.36.4 0.36.4 0.36.4 0.36.4
Java 17 17 17 17 17
Conda 24.1 24.1 24,1 24.1 24,1
Python 3,12 3,12 3,12 3,12 3,12
R 4.3 4.3 4,30 4,30 4.3
Scala 2.12 2,12 2,12 2,12 2.12

Spark-Laufzeitversion 1.1

Komponente 1.1.81
2024/09/30		 1.1.79
2024/09/23
 1.1.78
2024/09/13		 1.1.77
2024/08/22		 1.1.76
2024/08/15
Apache SparkHinweis 1 3.3.4 3.3.4 3.3.4 3.3.4 3.3.4
Cloud Storage-Connector 2.2.20 2.2.20 2.2.20 2.2.20 2.2.20
BigQuery-Connector 0.28.1 0.28.1 0.28.1 0.28.1 0.28.1
Java 11 11 11 11 11
Conda 22,11 22,11 22,11 22,11 22.11
Python 3,10 3,10 3.10 3.10 3.10
R 4.2 4.2 4.2 4.2 4.2
Scala 2.12 2.12 2.12 2,12 2,12

Hinweise:

1. Die folgenden serverlosen Dataproc-Laufzeiten verwenden die folgende Standardeinstellung Zeichencodierungen:

  • 2.2: UTF-8
  • 2.0: ASCII
  • 1.2: UTF-8
  • 1.1: ASCII