Programar flujos de procesamiento

En esta página se describe cómo crear una programación para las ejecuciones de tu canalización. Por ejemplo, puedes programar una canalización para que se ejecute todos los días a las 01:00 UTC.

Antes de empezar

Para crear la programación, debes tener un flujo de procesamiento implementado en Cloud Data Fusion. Si no tienes una, puedes crear una siguiendo la guía de inicio rápido.

Para crear, editar o suspender una programación, abre tu flujo de procesamiento en Cloud Data Fusion:

  1. Ve a tu instancia:

    1. En la Google Cloud consola, ve a la página de Cloud Data Fusion.

    2. Para abrir la instancia en Cloud Data Fusion Studio, haga clic en Instancias y, a continuación, en Ver instancia.

      Ir a Instancias

  2. Ve a la página Lista de Cloud Data Fusion.

  3. En la pestaña Implementado, elija una canalización.

    Se abrirá la página Pipeline, donde podrá crear, editar o suspender una programación para su canal.

Crear la programación

En la página Pipeline (Flujo de procesamiento) de Cloud Data Fusion Studio, haga clic en Schedule (Programar).

Puedes usar la pestaña Básica o Avanzada para definir tu programación.

Básico

  1. En la pestaña Básico, introduce la siguiente información sobre tu horario:

    • Frecuencia, como Every 5 minutes y Repeats every 30 days.
    • Hora de inicio en UTC.
    • Número máximo de ejecuciones simultáneas: elige hasta diez ejecuciones. Si ya hay diez pipelines en ejecución, la ejecución programada que estás creando no se realizará.
    • Perfil de Compute Engine: elige un perfil de computación. El valor predeterminado es el perfil de computación de Dataproc.

  2. Haz clic en Guardar y empezar programación (o en Guardar programación, si quieres empezarla más adelante).

Avanzado

  1. En la pestaña Avanzado, define tu programación con la sintaxis cron.
  2. En el campo Ejecuciones simultáneas máximas, elija hasta diez ejecuciones. Si ya hay diez pipelines en ejecución, la ejecución programada que estás creando no se ejecutará.
  3. Haz clic en Guardar y empezar programación (o en Guardar programación, si quieres empezarla más adelante).

Cambiar o suspender la programación

  • Puedes cambiar, iniciar o suspender una programación de una canalización desde la página Canalización del estudio de Cloud Data Fusion.

  • Para suspender la programación, haz clic en Anular programación.