Ce document liste les versions d'exécution Serverless pour Apache Spark compatibles et non compatibles, et décrit leurs caractéristiques.
Emplacement du nœud d'exécution
Cette section décrit comment les versions du runtime Serverless pour Apache Spark Google Cloud allouent des nœuds dans une région pour exécuter des charges de travail par lot et des sessions interactives.
Versions d'exécution
3.0+
: pour faciliter la disponibilité et éviter les ruptures de stock zonales, Serverless pour Apache Spark peut allouer des nœuds pour exécuter une charge de travail par lot ou une session interactive dans plusieurs zones de la région de la charge de travail ou de la session. Le trafic réseau interzone entre les nœuds d'une région n'entraîne aucun coût supplémentaire.Pour les versions de l'environnement d'exécution antérieures à
3.0
, Serverless pour Apache Spark alloue des nœuds pour exécuter une charge de travail par lot ou une session interactive dans une seule zone de la région de la charge de travail ou de la session.
Disponibilité et compatibilité des environnements d'exécution
Les versions d'exécution LTS (Long-Time-Support) de Serverless pour Apache Spark sont compatibles pendant 30 mois. Les versions d'exécution non LTS de Serverless pour Apache Spark sont compatibles pendant 12 mois.
Les versions d'exécution Serverless pour Apache Spark restent disponibles pendant deux ans après leur date de fin de compatibilité.
L'épinglage de la version mineure du runtime n'est pas pris en charge.
Versions d'exécution Serverless pour Apache Spark compatibles
Version | Dernière mise à jour | Publiées le | Compatible jusqu'à | Disponible jusqu'au | Remarques |
---|---|---|---|---|---|
Environnement d'exécution Spark 3.0 | 2025/10/16 | 2025/09/08 | Version d'évaluation. | ||
Environnement d'exécution Spark 2.3 LTS | 2025/10/06 | 2025/05/28 | 26/11/2027 | 26/11/2029 | Disponibilité générale. |
Runtime Spark 2.2 LTS | 2025/09/11 | 27/03/2024 | 30/09/2026 | 30/09/2028 | Disponibilité générale. Il s'agit de la version par défaut. |
Environnement d'exécution Spark 1.2 LTS | 2025/09/11 | 27/03/2024 | 30/09/2026 | 30/09/2028 | Disponibilité générale. |
Choisir une version d'exécution Serverless pour Apache Spark
La version d'exécution Serverless pour Apache Spark par défaut actuelle est indiquée dans Versions d'exécution Serverless pour Apache Spark compatibles.
Vous pouvez choisir une autre version d'exécution major.minor
lorsque vous envoyez une charge de travail par lot ou créez une session interactive ou un modèle de session.
Versions d'exécution Serverless pour Apache Spark non compatibles
Les versions suivantes de Serverless pour Apache Spark ne sont pas compatibles.
Version | Inclut | Date de sortie | Dernière mise à jour | Disponible jusqu'au | Remarques |
---|---|---|---|---|---|
Environnement d'exécution Spark 2.1 | Apache Spark 3.4.0 Connecteur Cloud Storage 2.2.20 Connecteur BigQuery 0.28.1 Java 17 Conda 23.3 Python 3.11 R 4.2 Scala 2.13 |
2022/01/19 | 30/05/2024 | 28/08/2026 | Non compatible depuis le 30/05/2024. 2.1.50 est la version finale. |
Environnement d'exécution Spark 2.0 | Apache Spark 3.3.4 Connecteur Cloud Storage 2.2.20 Java 17 Conda 22.9 Python 3.10 R 4.1 Scala 2.13 |
2022/10/21 | 22/08/2024 | 28/08/2026 | Non compatible depuis le 22/08/2024. La version 2.0.84 est la dernière version publiée. |
Environnement d'exécution Spark 1.1 | Apache Spark 3.3.4 Connecteur Cloud Storage 2.2.28 Connecteur BigQuery 0.28.1 Java 11 Conda 22.11 Python 3.10 R 4.2 Scala 2.12 |
2023/01/27 | 31/07/2025 | 31/07/2027 | Non compatible depuis le 31/07/2025. 1.1.111 est la version finale. |
Environnement d'exécution Spark 1.0 | Apache Spark 3.2.3 Connecteur Cloud Storage 2.2.11 Conda 4.11 Java 11 Python 3.9 R 4.1 Scala 2.12.17 |
2022/01/19 | 03/02/2023 | 30/05/2025 | Non compatible depuis le 03/02/2023. 1.0.29 est la dernière version publiée. |