Solucionar problemas de Cloud Data Fusion

En esta página se explica cómo resolver problemas con Cloud Data Fusion.

Recuperar información de errores de una ejecución de flujo de trabajo fallida

Cuando falla una ejecución de una canalización, puedes obtener información detallada sobre el error. Cloud Data Fusion 6.11.0 clasifica los errores de las canalizaciones por categoría, motivo y mensaje. Esta clasificación acelera la resolución y reduce la necesidad de examinar registros complejos.

Para obtener los detalles del error, sigue estos pasos:

Consola

  1. En la consola, abre tu instancia de Cloud Data Fusion y ve a tu canalización en la página Studio. Google Cloud

  2. En el nodo en el que se ha producido el error, haga clic en Ver errores.

  3. Revisa los detalles del error, que incluyen la categoría, el motivo y el mensaje del error.

  4. Opcional: Para descargar los registros sin procesar y analizarlos más a fondo, haz clic en Descargar registros sin procesar.

  5. Opcional: Para ver los registros sin procesar, haz clic en Ver registros.

REST

Envía una solicitud POST al siguiente endpoint:

 curl -H "Authorization: Bearer $(gcloud auth print-access-token)"
 -H "Content-Type: application/json" 
 ${CDAP_ENDPOINT}/v3/namespaces/NAMESPACE_ID/apps/PIPELINE_NAME/workflows/DataPipelineWorkflow/runs/RUN_ID/classify -X POST

Haz los cambios siguientes:

  • NAMESPACE_ID: el ID del espacio de nombres
  • PIPELINE_NAME: el nombre del flujo de procesamiento
  • RUN_ID: el ID de ejecución del flujo de procesamiento

A continuación se muestra un ejemplo de respuesta de error de un complemento:

 [
    {
       "stageName": "Stage Name",
       "errorCategory": "Plugin-x",
       "errorReason": "Input path gs://x does not exist",
       "errorMessage": "Input path gs://x does not exist",
       "errorType": "SYSTEM/USER/UNKNOWN",
       "dependency": "true/false"
    }
 ]
 ```
You can also [view advanced logs for your pipelines](/data-fusion/docs/how-to/viewing-stackdriver-logs).

Resolver problemas al crear una instancia de Cloud Data Fusion

Cuando creas una instancia de Cloud Data Fusion, puede que te encuentres con el siguiente problema:

Read access to project PROJECT_ID was denied.

Para solucionar este problema, inhabilite y vuelva a habilitar la API de Cloud Data Fusion y, a continuación, cree la instancia.