排查 Dataplex 资产沿袭集成问题

本页面介绍如何解决 Cloud Data Fusion Dataplex 资产沿袭集成方面的问题。

运行时错误

如需查找数据流水线的相关日志,请在 Cloud Data Fusion 网页界面中转到您的实例,然后依次点击系统管理员 > 管理 > 元数据服务

Data Lineage API 未启用或未授予角色

如果项目中未启用 Data Lineage API,或 Cloud Data Fusion 服务帐号尚未被授予 Data Lineage Events Producer 角色,就会出现以下问题:

Error calling the metadata consumer data-catalog-consumer:
io.grpc.StatusRuntimeException: PERMISSION_DENIED: Data Lineage API has not been
used in project <project_id> before or it is disabled. Enable it by visiting
https://console.developers.google.com/apis/api/datalineage.googleapis.com/overview?project=<project_id>
then retry. If you enabled this API recently, wait a few minutes for the action
to propagate to our systems and retry.

如需解决此问题,请启用 Data Lineage API 并向 Cloud Data Fusion Service Agent 授予 Data Lineage Events Producer 角色。如需了解详情,请参阅在 Dataplex 中查看沿袭

流水线在不受支持的 Cloud Data Fusion 版本中运行

如果 Cloud Data Fusion 实例升级到高于 6.8.0 的版本,但流水线尚未升级,就会出现以下问题:

Error calling the metadata consumer data-catalog-consumer:
java.lang.IllegalArgumentException: FQN for the asset is null.

如需解决此问题,请将流水线升级到最新版本。

日志中没有消息,Dataplex 中没有沿袭

如果流水线中使用的某个插件不支持到 Dataplex 的沿袭出站流量,会出现以下问题:

日志中没有错误或成功消息,并且 Dataplex 中没有沿袭。

如需解决此问题,您的流水线必须仅包含支持 Dataplex 中的数据沿袭的插件