Consulta registros de canalización en Cloud Logging

En esta página, se explica cómo habilitar Cloud Logging para tu instancia de Cloud Data Fusion y cómo ver los registros de canalización.

Antes de comenzar

Crea una instancia de Cloud Data Fusion. El proceso de creación de la instancia toma hasta 30 minutos en completarse.

Habilita Cloud Logging

Para usar Cloud Logging con tu canalización de Cloud Data Fusion, habilita Cloud Logging cuando creas tu instancia de Cloud Data Fusion.

  1. En la consola de Google Cloud, abre la página Instancias.
  2. Haz clic en Crear instancia.
  3. Haz clic en Mostrar opciones avanzadas.

  4. En Registro y supervisión, haz clic en Habilitar el servicio de registro de Stackdriver.

    Habilita Cloud Logging.

Después de crear la instancia, no podrás habilitar Cloud Logging en la consola de Google Cloud. En su lugar, ejecuta este comando de gcloud CLI:

gcloud beta data-fusion instances update INSTANCE_NAME \
  --project=PROJECT_ID \
  --location=LOCATION \
  --enable_stackdriver_logging

Visualiza registros

Cada ejecución de la canalización de Cloud Data Fusion tiene un RunID único. Después de implementar y ejecutar tu canalización, busca su RunID. Luego, en Logging, usa RunID para ver tus registros de canalización.

Obtén el RunID de la canalización

  1. Ve a tu instancia:

    1. En la consola de Google Cloud, ve a la página de Cloud Data Fusion.

    2. Para abrir la instancia en Cloud Data Fusion Studio, haz clic en Instancias y, luego, en Ver instancia.

      Ir a Instancias

  2. Haz clic en Resumen > Tabla.

  3. Haz clic en el vínculo RunId para copiarlo.

    Copia RunID.

Ver los registros en el Explorador de registros

  1. Ve a Cloud Logging > Explorador de registros en la consola de Google Cloud:

    Ir al Explorador de registros

  2. En los menús de filtros, selecciona Clúster de Cloud Dataproc > cdap-PIPELINE_NAME-YOUR_RUNID.

    Ir a Cloud Logging

Opcional: Filtra los registros

Usa los menús de filtro para filtrar tus registros. Puedes filtrar por varios niveles de gravedad del registro o por componentes como datafusion-pipeline-logs.

Opcional: Descarga los registros

Haz clic en Descargar registros.

Para obtener más información, consulta la documentación de Cloud Logging sobre cómo descargar entradas de registro.

¿Qué sigue?