このドキュメントでは、サポートされている Serverless for Apache Spark ランタイム バージョンとサポートされていないランタイム バージョンを一覧表示し、それらの特性について説明します。
ランタイム ノードのロケーション
このセクションでは、Apache Spark 用 Google Cloud Serverless ランタイム バージョンが、バッチ ワークロードとインタラクティブ セッションを実行するためにリージョン内のノードを割り当てる方法について説明します。
ランタイム バージョン
3.0+
: 取得可能性を高め、ゾーンの在庫切れを回避するため、Apache Spark 向け Serverless は、ワークロードまたはセッション リージョン内の複数のゾーンでバッチ ワークロードまたはインタラクティブ セッションを実行するノードを割り当てることがあります。リージョン内のノード間のクロスゾーン ネットワーク トラフィックに追加費用は発生しません。3.0
より前のランタイム バージョンでは、Apache Spark 向け Serverless は、ワークロードまたはセッションのリージョン内の単一ゾーンでバッチ ワークロードまたはインタラクティブ セッションを実行するノードを割り当てます。
ランタイムの可用性とサポート
Apache Spark 向け Serverless LTS(長時間サポート)ランタイム バージョンは 30 か月間サポートされます。Apache Spark 向け Serverless の非 LTS ランタイム バージョンは 12 か月間サポートされます。
Apache Spark 向け Serverless ランタイム バージョンは、サポート終了日から 2 年間使用できます。
ランタイムのサブマイナー バージョンの固定はサポートされていません。
サポートされている Apache Spark 向け Serverless ランタイム バージョン
バージョン | 最終更新日時 | リリース日 | サポート期限 | 有効期限 | メモ |
---|---|---|---|---|---|
Spark ランタイム 3.0 | 2025/10/16 | 2025/09/08 | プレビュー リリース。 | ||
Spark ランタイム 2.3 LTS | 2025/10/06 | 2025/05/28 | 2027/11/26 | 2029/11/26 | 一般向けのリリース。 |
Spark ランタイム 2.2 LTS | 2025/09/11 | 2024/03/27 | 2026/09/30 | 2028/09/30 | 一般向けのリリース。これがデフォルトのバージョンです。 |
Spark ランタイム 1.2 LTS | 2025/09/11 | 2024/03/27 | 2026/09/30 | 2028/09/30 | 一般向けのリリース。 |
Apache Spark 向け Serverless ランタイム バージョンを選択する方法
現在のデフォルトの Apache Spark 向け Serverless ランタイム バージョンは、サポートされている Apache Spark 向け Serverless ランタイム バージョンに記載されています。バッチ ワークロードを送信するとき、またはインタラクティブ セッションまたはセッション テンプレートを作成するときに、別の major.minor
ランタイム バージョンを選択できます。
サポートされていない Apache Spark 向け Serverless ランタイム バージョン
次の Serverless for Apache Spark のバージョンはサポートされていません。
バージョン | 含める | リリース日 | 最終更新 | 有効期限: | メモ |
---|---|---|---|---|---|
Spark ランタイム 2.1 | Apache Spark 3.4.0 Cloud Storage コネクタ 2.2.20 BigQuery コネクタ 0.28.1 Java 17 Conda 23.3 Python 3.11 R 4.2 Scala 2.13 |
2022/01/19 | 2024/5/30 | 2026/08/28 | 2024 年 5 月 30 日の時点でサポートされていないバージョン。2.1.50 が最終リリース バージョンでした。 |
Spark ランタイム 2.0 | Apache Spark 3.3.4 Cloud Storage コネクタ 2.2.20 Java 17 Conda 22.9 Python 3.10 R 4.1 Scala 2.13 |
2022/10/21 | 2024/08/22 | 2026/08/28 | 2024 年 8 月 22 日の時点でサポートされていないバージョン。2.0.84 が最終リリース バージョンでした。 |
Spark ランタイム 1.1 | Apache Spark 3.3.4 Cloud Storage コネクタ 2.2.28 BigQuery コネクタ 0.28.1 Java 11 Conda 22.11 Python 3.10 R 4.2 Scala 2.12 |
2023/01/27 | 2025/07/31 | 2027/07/31 | 2025 年 7 月 31 日の時点でサポートされていないバージョン。1.1.111 が最終リリース バージョンでした。 |
Spark ランタイム 1.0 | Apache Spark 3.2.3 Cloud Storage コネクタ 2.2.11 Conda 4.11 Java 11 Python 3.9 R 4.1 Scala 2.12.17 |
2022/01/19 | 2023/2/03 | 2025/05/30 | 2023 年 2 月 3 日の時点ではサポートされていません。1.0.29 が最終リリース バージョンでした。 |