Résoudre les problèmes liés à l'intégration de la traçabilité des éléments Dataplex

Cette page explique comment résoudre les problèmes liés à l'intégration de la traçabilité des éléments Cloud Data Fusion.

Erreurs d'exécution

Pour trouver des journaux pertinents pour vos pipelines de données, accédez à votre instance dans l'interface Web de Cloud Data Fusion, puis cliquez sur Administrateur système > Gestion > Service de métadonnées.

L'API Data Lineage n'est pas activée ou le rôle n'est pas attribué

Le problème suivant se produit lorsque l'API Data Lineage n'a pas été activée dans le projet ou que le rôle de producteur de données de traçabilité des données n'a pas été attribué au compte de service Cloud Data Fusion:

Error calling the metadata consumer data-catalog-consumer:
io.grpc.StatusRuntimeException: PERMISSION_DENIED: Data Lineage API has not been
used in project <project_id> before or it is disabled. Enable it by visiting
https://console.developers.google.com/apis/api/datalineage.googleapis.com/overview?project=<project_id>
then retry. If you enabled this API recently, wait a few minutes for the action
to propagate to our systems and retry.

Pour résoudre ce problème, activez l'API Data Lineage et attribuez le rôle Producteur d'événements de traçabilité des données à l'agent de service Cloud Data Fusion. Pour en savoir plus, consultez Afficher la traçabilité dans Dataplex.

Le pipeline s'exécute dans une version non compatible de Cloud Data Fusion

Le problème suivant se produit lorsque l'instance Cloud Data Fusion est mise à niveau vers une version supérieure à 6.8.0, mais que le pipeline n'a pas été mis à niveau:

Error calling the metadata consumer data-catalog-consumer:
java.lang.IllegalArgumentException: FQN for the asset is null.

Pour résoudre ce problème, mettez à niveau le pipeline vers la dernière version.

Aucun message dans les journaux et aucune traçabilité dans Dataplex

Le problème suivant se produit lorsque l'un des plug-ins utilisés dans le pipeline ne prend pas en charge la sortie de traçabilité vers Dataplex:

Les journaux ne contiennent pas de messages d'erreur ni de messages de réussite, et la traçabilité n'est pas assurée dans Dataplex.

Pour résoudre ce problème, votre pipeline ne doit contenir que les plug-ins compatibles avec la traçabilité des données dans Dataplex.