Serverlose Spark-Laufzeitversionen von Dataproc

Spark-Laufzeitversion 2.2

Komponente 2.2.14
2024/07/17
2.2.13
2024/07/11

2.2.12
2024/07/05
2.2.11
2024/06/26
2.2.10
2024/06/20
Apache SparkHinweis 1 3.5.1 3.5.1 3.5.1 3.5.1 3.5.1
Cloud Storage-Connector 3.0.0 3.0.0 3.0.0 3.0.0 3.0.0
BigQuery-Connector 0.36.3 0.36.3 0.36.3 0.36.3 0.36.3
Java 17 17 17 17 17
Conda 24,1 24,1 24,1 24,1 24,1
Python 3,12 3,12 3,12 3,12 3,12
R 4,30 4,30 4,30 4,30 4,30
Scala 2,13 2,13 2,13 2,13 2,13

Spark-Laufzeitversion 2.0

Komponente 2.0.78
2024/07/17
2.0.77
2024/07/11

2.0.76
2024/07/05
2.0.75
2024/06/26
2.0.74
2024/06/20
Apache SparkHinweis 1 3.3.4 3.3.4 3.3.4 3.3.4 3.3.4
Cloud Storage-Connector 2.2.20 2.2.20 2.2.20 2.2.20 2.2.20
Java 17 17 17 17 17
Conda 22,9 22,9 22,9 22,9 22,9
Python 3,10 3,10 3,10 3,10 3,10
R 4.1 4.1 4.1 4.1 4.1
Scala 2,13 2,13 2,13 2,13 2,13

Spark-Laufzeitversion 1.2

Komponente 1.2.14
2024/07/17
1.2.13
2024/07/11

1.2.12
2024/07/05
1.2.11
2024/06/26
1.2.10
2024/06/20
Apache SparkHinweis 1 3.5.1 3.5.1 3.5.1 3.5.1 3.5.1
Cloud Storage-Connector 3.0.0 3.0.0 3.0.0 3.0.0 3.0.0
BigQuery-Connector 0.36.3 0.36.3 0.36.3 0.36.3 0.36.3
Java 17 17 17 17 17
Conda 24,1 24,1 24,1 24,1 24,1
Python 3,12 3,12 3,12 3,12 3,12
R 4,30 4,30 4,30 4,30 4,30
Scala 2,12 2,12 2,12 2,12 2,12

Spark-Laufzeitversion 1.1

Komponente 1.1.70
2024/07/17
1.1.69
2024/07/11

1.1.68
2024/07/05
1.1.67
2024/06/26
1.1.66
2024/06/20
Apache SparkHinweis 1 3.3.4 3.3.4 3.3.4 3.3.4 3.3.4
Cloud Storage-Connector 2.2.20 2.2.20 2.2.20 2.2.20 2.2.20
BigQuery-Connector 0.28.1 0.28.1 0.28.1 0.28.1 0.28.1
Java 11 11 11 11 11
Conda 22,11 22,11 22,11 22,11 22,11
Python 3,10 3,10 3,10 3,10 3,10
R 4.2 4.2 4.2 4.2 4.2
Scala 2,12 2,12 2,12 2,12 2,12

Hinweise:

1. Die folgenden serverlosen Dataproc-Laufzeiten verwenden die folgende Standardeinstellung Zeichencodierungen:

  • 2.2: UTF-8
  • 2.0: ASCII
  • 1.2: UTF-8
  • 1.1: ASCII