Versões do ambiente de execução do Spark sem servidor para Dataproc

Ambiente de execução do Spark versão 2.2

Componente 2.2.29
2024/10/25
2.2.28
2024/10/17

2.2.27
2024/10/11
2.2.26
2024/10/04
2.2.25
2024/09/30
Apache SparkObservação 1 3.5.1 3.5.1 3.5.1 3.5.1 3.5.1
Conector do Cloud Storage 3.0.3 3.0.0 3.0.0 3.0.0 3.0.0
Conector do BigQuery 0.36.4 0.36.4 0.36.4 0.36.4 0.36.4
Java 17 17 17 17 17
Conda 24.1 24,1 24,1 24,1 24,1
Python 3,12 3.12 3.12 3.12 3,12
R 4.3 4.3 4.3 4,30 4,30
Scala 2.13 2,13 2,13 2.13 2,13

Ambiente de execução do Spark versão 1.2

Componente 1.2.29
2024/10/25
1.2.28
2024/10/17

1.2.27
2024/10/11
1.2.26
2024/10/04
1.2.25
2024/09/30
Apache SparkObservação 1 3.5.1 3.5.1 3.5.1 3.5.1 3.5.1
Conector do Cloud Storage 3.0.3 3.0.0 3.0.0 3.0.0 3.0.0
Conector do BigQuery 0.36.4 0.36.4 0.36.4 0.36.4 0.36.4
Java 17 17 17 17 17
Conda 24,1 24.1 24,1 24.1 24.1
Python 3,12 3,12 3,12 3.12 3,12
R 4,30 4.3 4,30 4,30 4.3
Scala 2.12 2,12 2.12 2.12 2.12

Ambiente de execução do Spark versão 1.1

Componente 1.1.85
2024/10/25
1.1.84
2024/10/17

1.1.83
2024/10/11
1.1.82
2024/10/04
1.1.81
2024/09/30
Apache SparkObservação 1 3.3.4 3.3.4 3.3.4 3.3.4 3.3.4
Conector do Cloud Storage 2.2.20 2.2.20 2.2.20 2.2.20 2.2.20
Conector do BigQuery 0.28.1 0.28.1 0.28.1 0.28.1 0.28.1
Java 11 11 11 11 11
Conda 22,11 22.11 22,11 22.11 22,11
Python 3.10 3.10 3,10 3,10 3,10
R 4.2 4.2 4.2 4.2 4.2
Scala 2,12 2.12 2.12 2,12 2.12

Observações:

1. Os runtimes sem servidor do Dataproc a seguir usam as seguintes codificações de caracteres padrão:

  • 2.2: UTF-8
  • 2.0: ASCII
  • 1.2: UTF-8
  • 1.1: ASCII