Versões do ambiente de execução do Serverless para Apache Spark

O

Dataproc sem servidor agora é o Google Cloud Serverless para Apache Spark. Até a atualização, alguns documentos vão se referir ao nome anterior.

• As versões do ambiente de execução sem servidor para Apache Spark LTS (suporte de longo prazo) são compatíveis por 30 meses. As versões de ambiente de execução não LTS do Serverless para Apache Spark têm suporte por 12 meses.
• As versões do ambiente de execução do Serverless para Apache Spark vão continuar disponíveis por dois anos após a data de fim do suporte.
• Somente para a versão de ambiente de execução 1.1: é possível especificar uma versão major.minor.subminor para uma carga de trabalho em lote ou uma sessão interativa em até um ano após o lançamento de uma versão secundária 1.1. A carga de trabalho ou sessão vai falhar se for enviada após um ano do lançamento da versão subalterna especificada do ambiente de execução. Outras versões de ambiente de execução do Serverless para Apache Spark não oferecem suporte à fixação de versão subalterna.

Versões de ambiente de execução sem servidor para Apache Spark compatíveis

Versão	Última atualização	Lançada em	Compatível até	Disponível até	Observações
Ambiente de execução do Spark 3.0	08/09/2025	08/09/2025			Versão de pré-lançamento.
Tempo de execução do Spark 2.3 LTS	22/08/2025	28/05/2025	2027/11/26	2029/11/26	Versão de disponibilidade geral.
Tempo de execução do Spark 2.2 LTS	22/08/2025	27/03/2024	2026/09/30	30/09/2028	Versão de disponibilidade geral. Essa é a versão padrão.
Tempo de execução do Spark 1.2 LTS	22/08/2025	27/03/2024	2026/09/30	30/09/2028	Versão de disponibilidade geral.

Como escolher uma versão do ambiente de execução do Serverless para Apache Spark

A versão padrão atual do ambiente de execução do Serverless para Apache Spark está listada em Versões compatíveis do ambiente de execução do Serverless para Apache Spark. É possível escolher uma versão diferente do ambiente de execução do major.minor ao enviar uma carga de trabalho em lote ou criar uma sessão interativa ou um modelo de sessão.

Versões de ambiente de execução do Serverless para Apache Spark sem suporte

As seguintes versões do Serverless para Apache Spark não são compatíveis.

Versão	Inclui	Liberada em	Última atualização	Disponível até	Observações
Ambiente de execução do Spark 2.1	Apache Spark 3.4.0 Conector do Cloud Storage 2.2.20 Conector do BigQuery 0.28.1 Java 17 Conda 23.3 Python 3.11 R 4.2 Scala 2.13	19/01/2022	30/5/2024	2026/08/28	Não compatível a partir de 30/05/2024. A versão 2.1.50 foi a última lançada.
Tempo de execução do Spark 2.0	Apache Spark 3.3.4 Conector do Cloud Storage 2.2.20 Java 17 Conda 22.9 Python 3.10 R 4.1 Scala 2.13	21/10/2022	2024/08/22	2026/08/28	Não compatível desde 22/08/2024. A versão 2.0.84 foi a última lançada.
Ambiente de execução do Spark 1.1	Apache Spark 3.3.4 Conector do Cloud Storage 2.2.28 Conector do BigQuery 0.28.1 Java 11 Conda 22.11 Python 3.10 R 4.2 Scala 2.12	27/01/2023	31/07/2025	2027/07/31	Não será compatível a partir de 31/07/2025. A versão 1.1.111 foi a final lançada.
Tempo de execução do Spark 1.0	Apache Spark 3.2.3 Conector do Cloud Storage 2.2.11 Conda 4.11 Java 11 Python 3.9 R 4.1 Scala 2.12.17	19/01/2022	2023/2/03	30/05/2025	Não compatível desde 03/02/2023. A versão 1.0.29 foi a última lançada.