Buckets de etapa de pruebas de Serverless para Apache Spark

En este documento, se proporciona información sobre los buckets de etapa de pruebas de Serverless para Apache Spark. Serverless for Apache Spark crea un bucket de Cloud Storage para la etapa de pruebas en tu proyecto o vuelve a usar un bucket de etapa de pruebas existente de solicitudes anteriores de creación de lotes. Este es el bucket predeterminado que crean los clústeres de Dataproc en Compute Engine. Para obtener más información, consulta Staging de Dataproc y buckets temporales.

Serverless para Apache Spark almacena las dependencias de la carga de trabajo, los archivos de configuración y el resultado de la consola del controlador de trabajos en el bucket de staging.

Serverless para Apache Spark establece buckets de etapa de pruebas regionales en ubicaciones de Cloud Storage según la zona de Compute Engine en la que se implementa tu carga de trabajo y, luego, crea y administra estos buckets por ubicación a nivel del proyecto. Los buckets de Cloud Storage creados por Serverless for Apache Spark se comparten entre las cargas de trabajo de la misma región y se crean con un período de retención de eliminación no definitiva establecido en 0 segundos.