Dataproc Serverless Spark 运行时版本

Spark 运行时版本 2.2

组件 2.2.30
2024/10/31
2.2.29
2024/10/25

2.2.28
2024/10/17
2.2.27
2024/10/11
2.2.26
2024/10/04
Apache Spark备注 1 3.5.1 3.5.1 3.5.1 3.5.1 3.5.1
Cloud Storage 连接器 3.0.3 3.0.3 3.0.0 3.0.0 3.0.0
BigQuery 连接器 0.36.4 0.36.4 0.36.4 0.36.4 0.36.4
Java 17 17 17 17 17
Conda 24.1 24.1 24.1 24.1 24.1
Python 3.12 3.12 3.12 3.12 3.12
R 4.3 4.3 4.3 4.3 4.3
Scala 2.13 2.13 2.13 2.13 2.13

Spark 运行时版本 1.2

组件 1.2.30
2024/10/31
1.2.29
2024/10/25

1.2.28
2024/10/17
1.2.27
2024/10/11
1.2.26
2024/10/04
Apache Spark备注 1 3.5.1 3.5.1 3.5.1 3.5.1 3.5.1
Cloud Storage 连接器 3.0.3 3.0.3 3.0.0 3.0.0 3.0.0
BigQuery 连接器 0.36.4 0.36.4 0.36.4 0.36.4 0.36.4
Java 17 17 17 17 17
Conda 24.1 24.1 24.1 24.1 24.1
Python 3.12 3.12 3.12 3.12 3.12
R 4.3 4.3 4.3 4.3 4.3
Scala 2.12 2.12 2.12 2.12 2.12

Spark 运行时版本 1.1

组件 1.1.86
2024/10/31
1.1.85
2024/10/25

1.1.84
2024/10/17
1.1.83
2024/10/11
1.1.82
2024/10/04
Apache Spark备注 1 3.3.4 3.3.4 3.3.4 3.3.4 3.3.4
Cloud Storage 连接器 2.2.20 2.2.20 2.2.20 2.2.20 2.2.20
BigQuery 连接器 0.28.1 0.28.1 0.28.1 0.28.1 0.28.1
Java 11 11 11 11 11
Conda 22.11 22.11 22.11 22.11 22.11
Python 3.10 3.10 3.10 3.10 3.10
R 4.2 4.2 4.2 4.2 4.2
Scala 2.12 2.12 2.12 2.12 2.12

注意

1. 以下 Dataproc Serverless 运行时使用以下默认字符编码:

  • 2.2UTF-8
  • 2.0ASCII
  • 1.2UTF-8
  • 1.1ASCII