Crear alertas de flujo de trabajo

En esta página se describe cómo configurar alertas para las canalizaciones de datos en Cloud Data Fusion.

Puedes crear alertas a través de los siguientes servicios:

  • Alertas a través de Cloud Data Fusion: estas alertas se configuran al diseñar una canalización por lotes en Cloud Data Fusion. Una vez que hayas implementado la canalización, no podrás añadir ni editar ninguna alerta.

  • Alertas basadas en registros a través de Cloud Monitoring: estas alertas se configuran en la consola Google Cloud antes y después de implementar la canalización.

Antes de empezar

Necesitas una instancia de Cloud Data Fusion. Para obtener más información, consulta el artículo sobre cómo crear una instancia de Cloud Data Fusion.

Añadir una alerta en Cloud Data Fusion

  1. Abre tu instancia.

    1. En la Google Cloud consola, ve a la página de Cloud Data Fusion.

    2. Para abrir la instancia en Cloud Data Fusion Studio, haga clic en Instancias y, a continuación, en Ver instancia.

      Ir a Instancias

  2. Ve a la página Studio en la que estás diseñando tu canalización.

  3. Haz clic en Configurar > Alertas de la canalización > Añadir.

  4. Selecciona y configura la alerta. Para obtener más información sobre cómo configurar alertas, consulta Alertas de flujos de procesamiento por lotes.

  5. Una vez que hayas configurado la alerta, haz clic en Validar para comprobar si hay errores y, a continuación, en Confirmar.

Crear una alerta en Monitoring

  1. Habilita Cloud Logging en tu instancia de Cloud Data Fusion.

  2. Crea una alerta basada en registros.

    1. En la Google Cloud consola, ve a la página Explorador de registros.

      Ir al Explorador de registros

      En esta página puedes almacenar, consultar, actualizar y eliminar datos.

    2. Introduce la siguiente consulta:

      resource.type="cloud_dataproc_cluster"
logName="projects/PROJECT_ID/logs/datafusion-pipeline-logs"
resource.labels.project_id="PROJECT_ID"
severity=ERROR
jsonPayload.message=~"Pipeline '.*' failed."

      Sustituye PROJECT_ID por el ID de tu proyecto.

    3. Haz clic en Crear alerta y configúrala.

Las alertas solo se generan cuando la canalización se ejecuta en un clúster de Dataproc y falla. En caso de que no se pueda crear un clúster de Dataproc, no se generará ninguna alerta.

Siguientes pasos