Versions d'exécution de Google Cloud Serverless pour Apache Spark

Ce document liste les versions d'exécution Serverless pour Apache Spark compatibles et non compatibles, et décrit leurs caractéristiques.

Emplacement du nœud d'exécution

Cette section décrit comment les versions du runtime Serverless pour Apache Spark Google Cloud allouent des nœuds dans une région pour exécuter des charges de travail par lot et des sessions interactives.

  • Versions d'exécution 3.0+ : pour faciliter la disponibilité et éviter les ruptures de stock zonales, Serverless pour Apache Spark peut allouer des nœuds pour exécuter une charge de travail par lot ou une session interactive dans plusieurs zones de la région de la charge de travail ou de la session. Le trafic réseau interzone entre les nœuds d'une région n'entraîne aucun coût supplémentaire.

    Pour les versions de l'environnement d'exécution antérieures à 3.0, Serverless pour Apache Spark alloue des nœuds pour exécuter une charge de travail par lot ou une session interactive dans une seule zone de la région de la charge de travail ou de la session.

Disponibilité et compatibilité des environnements d'exécution

  • Les versions d'exécution LTS (Long-Time-Support) de Serverless pour Apache Spark sont compatibles pendant 30 mois. Les versions d'exécution non LTS de Serverless pour Apache Spark sont compatibles pendant 12 mois.

  • Les versions d'exécution Serverless pour Apache Spark restent disponibles pendant deux ans après leur date de fin de compatibilité.

  • L'épinglage de la version mineure du runtime n'est pas pris en charge.

Versions d'exécution Serverless pour Apache Spark compatibles

Version Dernière mise à jour Publiées le Compatible jusqu'à Disponible jusqu'au Remarques
Environnement d'exécution Spark 3.0 2025/10/16 2025/09/08 Version d'évaluation.
Environnement d'exécution Spark 2.3 LTS 2025/10/06 2025/05/28 26/11/2027 26/11/2029 Disponibilité générale.
Runtime Spark 2.2 LTS 2025/09/11 27/03/2024 30/09/2026 30/09/2028 Disponibilité générale. Il s'agit de la version par défaut.
Environnement d'exécution Spark 1.2 LTS 2025/09/11 27/03/2024 30/09/2026 30/09/2028 Disponibilité générale.

Choisir une version d'exécution Serverless pour Apache Spark

La version d'exécution Serverless pour Apache Spark par défaut actuelle est indiquée dans Versions d'exécution Serverless pour Apache Spark compatibles. Vous pouvez choisir une autre version d'exécution major.minor lorsque vous envoyez une charge de travail par lot ou créez une session interactive ou un modèle de session.

Versions d'exécution Serverless pour Apache Spark non compatibles

Les versions suivantes de Serverless pour Apache Spark ne sont pas compatibles.

Version Inclut Date de sortie Dernière mise à jour Disponible jusqu'au Remarques
Environnement d'exécution Spark 2.1 Apache Spark 3.4.0
Connecteur Cloud Storage 2.2.20
Connecteur BigQuery 0.28.1
Java 17
Conda 23.3
Python 3.11
R 4.2
Scala 2.13
2022/01/19 30/05/2024 28/08/2026 Non compatible depuis le 30/05/2024. 2.1.50 est la version finale.
Environnement d'exécution Spark 2.0 Apache Spark 3.3.4
Connecteur Cloud Storage 2.2.20
Java 17
Conda 22.9
Python 3.10
R 4.1
Scala 2.13
2022/10/21 22/08/2024 28/08/2026 Non compatible depuis le 22/08/2024. La version 2.0.84 est la dernière version publiée.
Environnement d'exécution Spark 1.1 Apache Spark 3.3.4
Connecteur Cloud Storage 2.2.28
Connecteur BigQuery 0.28.1
Java 11
Conda 22.11
Python 3.10
R 4.2
Scala 2.12
2023/01/27 31/07/2025 31/07/2027 Non compatible depuis le 31/07/2025. 1.1.111 est la version finale.
Environnement d'exécution Spark 1.0 Apache Spark 3.2.3
Connecteur Cloud Storage 2.2.11
Conda 4.11
Java 11
Python 3.9
R 4.1
Scala 2.12.17
2022/01/19 03/02/2023 30/05/2025 Non compatible depuis le 03/02/2023. 1.0.29 est la dernière version publiée.