Versions de l'environnement d'exécution Spark sans serveur de Dataproc

Environnement d'exécution Spark version 2.2

Composant 2.2.11
2024/06/26
2.2.10
2024/06/20

2.2.9
2024/06/13
2.2.8
2024/06/05
2.2.7
2024/05/29
Apache SparkNote 1 3.5.1 3.5.1 3.5.1 3.5.1 3.5.1
Connecteur Cloud Storage 3.0.0 3.0.0 3.0.0 3.0.0 3.0.0
Connecteur BigQuery 0.36.3 0.36.3 0.36.3 0.36.2 0.36.2
Java 17 17 17 17 17
Conda 24,1 24,1 24,1 24,1 24,1
Python 3,12 3,12 3,12 3,12 3,12
R 4,3 4,3 4,3 4,3 4,3
Scala 2,13 2,13 2,13 2,13 2,13

Environnement d'exécution Spark version 2.0

Composant 2.0.75
2024/06/26
2.0.74
2024/06/20

2.0.73
2024/06/13
2.0.72
2024/06/05
2.0.71
2024/05/29
Apache SparkNote 1 3.3.4 3.3.4 3.3.4 3.3.4 3.3.4
Connecteur Cloud Storage 2.2.20 2.2.20 2.2.20 2.2.20 2.2.20
Java 17 17 17 17 17
Conda 22,9 22,9 22,9 22,9 22,9
Python 3,10 3,10 3,10 3,10 3,10
R 4.1 4.1 4.1 4.1 4.1
Scala 2,13 2,13 2,13 2,13 2,13

Environnement d'exécution Spark version 1.2

Composant 1.2.11
2024/06/26
1.2.10
2024/06/20

1.2.9
2024/06/13
1.2.8
2024/06/05
1.2.7
2024/05/29
Apache SparkNote 1 3.5.1 3.5.1 3.5.1 3.5.1 3.5.1
Connecteur Cloud Storage 3.0.0 3.0.0 3.0.0 3.0.0 3.0.0
Connecteur BigQuery 0.36.3 0.36.3 0.36.3 0.36.2 0.36.2
Java 17 17 17 17 17
Conda 24,1 24,1 24,1 24,1 24,1
Python 3,12 3,12 3,12 3,12 3,12
R 4,3 4,3 4,3 4,3 4,3
Scala 2,12 2,12 2,12 2,12 2,12

Version d'exécution 1.1 Spark

Composant 1.1.67
2024/06/26
1.1.66
2024/06/20

1.1.65
2024/06/13
1.1.64
2024/06/05
1.1.63
2024/05/29
Apache SparkNote 1 3.3.4 3.3.4 3.3.4 3.3.4 3.3.4
Connecteur Cloud Storage 2.2.20 2.2.20 2.2.20 2.2.20 2.2.20
Connecteur BigQuery 0.28.1 0.28.1 0.28.1 0.28.1 0.28.1
Java 11 11 11 11 11
Conda 22,11 22,11 22,11 22,11 22,11
Python 3,10 3,10 3,10 3,10 3,10
R 4.2 4.2 4.2 4.2 4.2
Scala 2,12 2,12 2,12 2,12 2,12

Remarques :

1. Les environnements d'exécution Dataproc sans serveur suivants utilisent les encodages de caractères par défaut suivants:

  • 2.2 : UTF-8
  • 2.0 : ASCII
  • 1.2 : UTF-8
  • 1.1 : ASCII