Cloud Composer 1 | Cloud Composer 2 | Cloud Composer 3
En esta página, se explica cómo configurar tu entorno para guardar instantáneas según un programa.
Para obtener más información sobre cómo funcionan las instantáneas del entorno y cómo guardarlas manualmente, consulta Cómo guardar y cargar instantáneas.
Cómo funcionan las instantáneas programadas
Cuando habilitas las instantáneas programadas, Cloud Composer periódicamente guarda las instantáneas de tu entorno en un bucket de Cloud Storage.
Si creas instantáneas de forma manual, Cloud Composer las guarda en el bucket del entorno de forma predeterminada. Para las instantáneas programadas, recomendamos guardar las instantáneas en otro bucket. De esta manera, puedes configurar permisos y una configuración del ciclo de vida para este bucket. Un bucket puede contener instantáneas de varios entornos, y también puedes crear buckets que sean redundantes en todas las regiones.
Antes de comenzar
Para obtener más información sobre los requisitos y las limitaciones de las instantáneas, consulta Cómo guardar y cargar instantáneas.
Cloud Composer admite instantáneas programadas en 2.0.32 y versiones posteriores. versiones. Las instantáneas de entorno son compatibles con la versión 2.0.9 y versiones posteriores.
Crea un bucket para las instantáneas programadas
Crea un bucket para las instantáneas programadas. Considera cómo quieres usar las instantáneas de entorno. Si es parte de tu plan de recuperación ante desastres y, luego, bucket que es redundante entre regiones o una bucket en una región diferente, por lo que tendrás acceso a los datos incluso en caso de una para una interrupción total a nivel regional. De lo contrario, un bucket en la misma región que el entorno podría ser más adecuado, y en este caso, se reducen los costos de transferencia de datos entre regiones.
Configura los permisos del bucket
Configura los siguientes permisos:
La cuenta de servicio de tu entorno debe tener operaciones de lectura y permisos de escritura para este bucket. Por ejemplo, el El rol de administrador de objetos de almacenamiento tiene esos permisos.
Las cuentas de usuario no necesitan ningún permiso adicional para el bucket para cargar instantáneas, a menos que quieras ver el contenido del bucket de la consola de Google Cloud. En este caso, una cuenta de usuario debe haber leído permiso en el bucket.
Establece una configuración del ciclo de vida para el bucket
Para ahorrar costos de almacenamiento, puedes configurar una regla que borre las instantáneas del ambiente después de un período determinado.
Por ejemplo, para borrar de forma automática las instantáneas de más de 30 días de antigüedad, haz lo siguiente:
- Establece una configuración del ciclo de vida para el bucket.
- Especifica la acción Borrar objeto.
- Selecciona Antigüedad y 30 días como condición.
Habilita una programación de instantáneas para tu entorno
Console
En la consola de Google Cloud, ve a la página Entornos.
En la lista de entornos, haz clic en el nombre de tu entorno. Se abrirá la página Detalles del entorno.
Ve a la pestaña Configuración del entorno.
En Configuración de recuperación > Programación de instantáneas, haz clic en Editar. Se abrirá el panel Programación de instantáneas.
En el panel Programación de instantáneas, selecciona Crear instantáneas periódicamente según el programa especificado.
En la lista desplegable Frecuencia de programación, selecciona el período diario, semanal o personalizado para las instantáneas.
Puedes especificar un programa personalizado con el formato unix-cron. Por ejemplo, para guardar instantáneas cada 30 minutos, especifica
*/30 * * * *
.En el campo Ubicación de instantáneas, selecciona la carpeta del bucket en la que deseas guardar las instantáneas.
gcloud
Actualiza la configuración de tu entorno. Los siguientes argumentos definen los parámetros de las instantáneas programadas:
--enable-scheduled-snapshot-creation
habilita las instantáneas programadas.--snapshot-location
especifica una carpeta de bucket en la que quieren guardar instantáneas.--snapshot-creation-schedule
especifica la frecuencia se deben tomar instantáneas de entorno, en el formato unix-cron. Por ejemplo, para crear una instantánea cada 30 minutos, especifica*/30 * * * *
.--snapshot-schedule-timezone
define una zona horaria para el programa. Esta es una compensación de tiempo y no tiene en cuenta el horario de verano cambios. Los valores válidos van desdeUTC-12
hastaUTC+12
. Ejemplos:UTC
,UTC-01
,UTC+03
.
gcloud beta composer environments update ENVIRONMENT_NAME \
--location LOCATION \
--enable-scheduled-snapshot-creation \
--snapshot-location "gs://SNAPSHOTS_FOLDER" \
--snapshot-creation-schedule "CRON_EXPRESSION" \
--snapshot-schedule-timezone "TIME_ZONE"
Reemplaza lo siguiente:
ENVIRONMENT_NAME
por el nombre del entorno.LOCATION
por la región en la que se encuentra el entorno.SNAPSHOTS_FOLDER
por el URI de una carpeta del bucket en la que se realizará guardar la instantánea.CRON_EXPRESSION
con el programa, en el formato unix-cron.TIME_ZONE
por una zona horaria para el programa
Ejemplo (todos los días a las 4:00 a.m., UTC+01):
gcloud beta composer environments update example-environment \
--location us-central1 \
--enable-scheduled-snapshot-creation \
--snapshot-location "gs://example-bucket/environment_snapshots" \
--snapshot-creation-schedule "0 4 * * *" \
--snapshot-schedule-timezone "UTC+01"
API
Realiza una solicitud a la API de environments.patch
.
En esta solicitud, realiza lo siguiente:
En el parámetro
updateMask
, especifica la máscaraconfig.recoveryConfig.scheduledSnapshotsConfig
para reemplazar la configuración existente de instantáneas programadas.En el cuerpo de la solicitud, especifica la configuración de las instantáneas:
{ "config": { "recoveryConfig": { "scheduledSnapshotsConfig": { "enabled": true, "snapshot_location": "gs://SNAPSHOTS_FOLDER", "snapshot_creation_schedule": "CRON_EXPRESSION", "time_zone": "TIME_ZONE" } } } }
Reemplaza lo siguiente:
SNAPSHOTS_FOLDER
con el URI de una carpeta de bucket en la que se guardará la instantánea.CRON_EXPRESSION
con el programa, en formato unix-cron.TIME_ZONE
con una zona horaria para el programa. Esta es una compensación de tiempo y no tiene en cuenta el horario de verano cambia el horario. Los valores válidos van desdeUTC-12
hastaUTC+12
. Ejemplos:UTC
,UTC-01
yUTC+03
.
Ejemplo (todos los días a las 4:00, UTC+01):
// PATCH https://composer.googleapis.com/v1beta1/projects/example-project/ // locations/us-central1/environments/example-environment?updateMask= // config.recoveryConfig.scheduledSnapshotsConfig { "config": { "recoveryConfig": { "scheduledSnapshotsConfig": { "enabled": true, "snapshot_location": "gs://example-bucket/environment_snapshots", "snapshot_creation_schedule": "0 4 * * *", "time_zone": "UTC+01" } } } }
Terraform
El scheduled_snapshots_config
en el bloque recovery_config
define
para las instantáneas programadas:
enabled
habilita las instantáneas programadas.snapshot_location
especifica una carpeta de bucket en la que deseas guardar las instantáneas.snapshot_creation_schedule
especifica con qué frecuencia se deben tomar las instantáneas del entorno, en el formato unix-cron. Por ejemplo, para crear una instantánea cada 30 minutos, especifica*/30 * * * *
.
resource "google_composer_environment" "example" {
provider = google-beta
name = "ENVIRONMENT_NAME"
region = "LOCATION"
recovery_config {
scheduled_snapshots_config {
enabled = true
snapshot_location = "gs://SNAPSHOTS_FOLDER"
snapshot_creation_schedule = "CRON_EXPRESSION"
time_zone = "TIME_ZONE"
}
}
}
Reemplaza lo siguiente:
SNAPSHOTS_FOLDER
por el URI de una carpeta del bucket en la que se realizará guardar la instantánea.CRON_EXPRESSION
con el programa, en formato unix-cron.TIME_ZONE
con una zona horaria para el programa. Esta es una compensación de tiempo y no tiene en cuenta el horario de verano cambia el horario. Los valores válidos van desdeUTC-12
hastaUTC+12
. Ejemplos:UTC
,UTC-01
yUTC+03
.
Ejemplo (todos los días a las 4:00 a.m., UTC+01):
resource "google_composer_environment" "example" {
provider = google-beta
name = "example-environment"
region = "us-central1"
recovery_config {
scheduled_snapshots_config {
enabled = true
snapshot_location = "gs://example-bucket/environment_snapshots"
snapshot_creation_schedule = "0 4 * * *"
time_zone = "UTC+01"
}
}
}
Inhabilitar instantáneas programadas
Si inhabilitas las instantáneas programadas, todas las instantáneas existentes que ya estaban no se modifican ni se quitan. Estas instantáneas permanecen en la ubicación en la que se guardaron.
Console
En la consola de Google Cloud, ve a la página Entornos.
En la lista de entornos, haz clic en el nombre de tu entorno. Se abrirá la página Detalles del entorno.
Ve a la pestaña Configuración del entorno.
En Configuración de recuperación > Programación de instantáneas, haz clic en Editar. Se abrirá el panel Programación de instantáneas.
En el panel Programación de instantáneas, selecciona No crear instantáneas. automáticamente.
gcloud
Actualiza la configuración de tu entorno. El
El argumento --disable-scheduled-snapshot-creation
inhabilita la programación
instantáneas.
gcloud beta composer environments update ENVIRONMENT_NAME \
--location LOCATION \
--disable-scheduled-snapshot-creation
Reemplaza lo siguiente:
ENVIRONMENT_NAME
por el nombre del entorno.LOCATION
por la región en la que se encuentra el entorno
Ejemplo:
gcloud beta composer environments update example-environment \
--location us-central1 \
--disable-scheduled-snapshot-creation
API
Realiza una solicitud a la API de environments.patch
.
En esta solicitud, realiza lo siguiente:
En el parámetro
updateMask
, especifica la Máscara deconfig.recoveryConfig.scheduledSnapshotsConfig.enabled
para reemplazar el valor del campoenabled
.En el cuerpo de la solicitud, especifica el valor nuevo:
{ "config": { "recoveryConfig": { "scheduledSnapshotsConfig": { "enabled": false } } } }
Ejemplo:
// PATCH https://composer.googleapis.com/v1beta1/projects/example-project/
// locations/us-central1/environments/example-environment?updateMask=
// config.recoveryConfig.scheduledSnapshotsConfig.enabled
{
"config": {
"recoveryConfig": {
"scheduledSnapshotsConfig": {
"enabled": false
}
}
}
}
Terraform
Para inhabilitar las instantáneas programadas, configura el campo enabled
en
Bloque scheduled_snapshots_config
a false
:
resource "google_composer_environment" "example" {
provider = google-beta
name = "ENVIRONMENT_NAME"
region = "LOCATION"
recovery_config {
scheduled_snapshots_config {
enabled = false
}
}
}
Ejemplo:
resource "google_composer_environment" "example" {
provider = google-beta
name = "example-environment"
region = "us-central1"
recovery_config {
scheduled_snapshots_config {
enabled = false
// Other scheduled snapshots parameters
}
}
}
¿Qué sigue?
- Guarda y carga instantáneas del entorno
- Recuperación ante desastres con instantáneas
- Control de acceso