Crea alertas de canalización

En esta página, se describe cómo configurar alertas para canalizaciones de datos en Cloud Data Fusion.

Puedes crear alertas a través de los siguientes servicios:

  • Alertas a través de Cloud Data Fusion: Configura estas alertas cuando diseñas una canalización por lotes en Cloud Data Fusion. Después de implementar la canalización, no puedes agregar ni editar una alerta.

  • Alertas basadas en registros a través de Cloud Monitoring: Configura estas alertas en la consola de Google Cloud antes y después de implementar la canalización.

Antes de comenzar

Necesitas una instancia de Cloud Data Fusion. Para obtener más información, consulta Crea una instancia de Cloud Data Fusion.

Agregue una alerta en Cloud Data Fusion

  1. Abre tu instancia.

    1. En la consola de Google Cloud, ve a la página de Cloud Data Fusion.

    2. Para abrir la instancia en la interfaz web de Cloud Data Fusion, haga clic en Instancias y, luego, en Ver instancia.

      Ir a Instancias

  2. Ve a la página de Studio en la que estás diseñando tu canalización.

  3. Haz clic en Configurar > Alertas de canalizaciones > Agregar.

  4. Selecciona y configura la alerta. Para obtener más información sobre la configuración de alertas, consulta Alertas de canalizaciones por lotes.

  5. Después de configurar la alerta, haz clic en Validar para verificar si hay errores y, luego, en Confirmar.

Crea una alerta en Monitoring

  1. Habilita Cloud Logging en tu instancia de Cloud Data Fusion.

  2. Crea una alerta basada en registros.

    1. En la consola de Google Cloud, ve a la página Explorador de registros.

      Ir al Explorador de registros.

      En esta página, puedes almacenar, consultar, actualizar y borrar datos.

    2. Ingresa la siguiente consulta:

      resource.type="cloud_dataproc_cluster"
logName="projects/PROJECT_ID/logs/datafusion-pipeline-logs"
resource.labels.project_id="PROJECT_ID"
severity=ERROR
jsonPayload.message=~"Pipeline '.*' failed."

      Reemplaza PROJECT_ID por el ID del proyecto.

    3. Haz clic en Crear alerta y configúrala.

Solo se genera una alerta cuando la canalización se ejecuta en un clúster de Dataproc y falla. En el caso de las fallas de creación de clústeres de Dataproc, la alerta no se genera.

¿Qué sigue?