Apache Spark 向け Google Cloud Serverless ランタイム バージョン

このドキュメントでは、サポートされている Serverless for Apache Spark ランタイム バージョンとサポートされていないランタイム バージョンを一覧表示し、それらの特性について説明します。

ランタイム ノードのロケーション

このセクションでは、Apache Spark 用 Google Cloud Serverless ランタイム バージョンが、バッチ ワークロードとインタラクティブ セッションを実行するためにリージョン内のノードを割り当てる方法について説明します。

  • ランタイム バージョン 3.0+: 取得可能性を高め、ゾーンの在庫切れを回避するため、Apache Spark 向け Serverless は、ワークロードまたはセッション リージョン内の複数のゾーンでバッチ ワークロードまたはインタラクティブ セッションを実行するノードを割り当てることがあります。リージョン内のノード間のクロスゾーン ネットワーク トラフィックに追加費用は発生しません。

    3.0 より前のランタイム バージョンでは、Apache Spark 向け Serverless は、ワークロードまたはセッションのリージョン内の単一ゾーンでバッチ ワークロードまたはインタラクティブ セッションを実行するノードを割り当てます。

ランタイムの可用性とサポート

  • Apache Spark 向け Serverless LTS(長時間サポート)ランタイム バージョンは 30 か月間サポートされます。Apache Spark 向け Serverless の非 LTS ランタイム バージョンは 12 か月間サポートされます。

  • Apache Spark 向け Serverless ランタイム バージョンは、サポート終了日から 2 年間使用できます。

  • ランタイムのサブマイナー バージョンの固定はサポートされていません。

サポートされている Apache Spark 向け Serverless ランタイム バージョン

バージョン 最終更新日時 リリース日 サポート期限 有効期限 メモ
Spark ランタイム 3.0 2025/10/16 2025/09/08 プレビュー リリース。
Spark ランタイム 2.3 LTS 2025/10/06 2025/05/28 2027/11/26 2029/11/26 一般向けのリリース。
Spark ランタイム 2.2 LTS 2025/09/11 2024/03/27 2026/09/30 2028/09/30 一般向けのリリース。これがデフォルトのバージョンです。
Spark ランタイム 1.2 LTS 2025/09/11 2024/03/27 2026/09/30 2028/09/30 一般向けのリリース。

Apache Spark 向け Serverless ランタイム バージョンを選択する方法

現在のデフォルトの Apache Spark 向け Serverless ランタイム バージョンは、サポートされている Apache Spark 向け Serverless ランタイム バージョンに記載されています。バッチ ワークロードを送信するとき、またはインタラクティブ セッションまたはセッション テンプレートを作成するときに、別の major.minor ランタイム バージョンを選択できます。

サポートされていない Apache Spark 向け Serverless ランタイム バージョン

次の Serverless for Apache Spark のバージョンはサポートされていません。

バージョン 含める リリース日 最終更新 有効期限: メモ
Spark ランタイム 2.1 Apache Spark 3.4.0
Cloud Storage コネクタ 2.2.20
BigQuery コネクタ 0.28.1
Java 17
Conda 23.3
Python 3.11
R 4.2
Scala 2.13
2022/01/19 2024/5/30 2026/08/28 2024 年 5 月 30 日の時点でサポートされていないバージョン。2.1.50 が最終リリース バージョンでした。
Spark ランタイム 2.0 Apache Spark 3.3.4
Cloud Storage コネクタ 2.2.20
Java 17
Conda 22.9
Python 3.10
R 4.1
Scala 2.13
2022/10/21 2024/08/22 2026/08/28 2024 年 8 月 22 日の時点でサポートされていないバージョン。2.0.84 が最終リリース バージョンでした。
Spark ランタイム 1.1 Apache Spark 3.3.4
Cloud Storage コネクタ 2.2.28
BigQuery コネクタ 0.28.1
Java 11
Conda 22.11
Python 3.10
R 4.2
Scala 2.12
2023/01/27 2025/07/31 2027/07/31 2025 年 7 月 31 日の時点でサポートされていないバージョン。1.1.111 が最終リリース バージョンでした。
Spark ランタイム 1.0 Apache Spark 3.2.3
Cloud Storage コネクタ 2.2.11
Conda 4.11
Java 11
Python 3.9
R 4.1
Scala 2.12.17
2022/01/19 2023/2/03 2025/05/30 2023 年 2 月 3 日の時点ではサポートされていません。1.0.29 が最終リリース バージョンでした。