Memecahkan masalah integrasi silsilah aset Dataplex

Halaman ini menunjukkan cara menyelesaikan masalah terkait integrasi silsilah aset Dataplex Cloud Data Fusion.

Error runtime

Untuk menemukan log yang relevan bagi pipeline data Anda, buka instance di antarmuka web Cloud Data Fusion, lalu klik System Admin > Management > Metadata Service.

Data Lineage API tidak diaktifkan atau peran tidak diberikan

Masalah berikut terjadi jika Data Lineage API belum diaktifkan dalam project, atau akun layanan Cloud Data Fusion belum diberi peran Data Lineage Events Producer:

Error calling the metadata consumer data-catalog-consumer:
io.grpc.StatusRuntimeException: PERMISSION_DENIED: Data Lineage API has not been
used in project <project_id> before or it is disabled. Enable it by visiting
https://console.developers.google.com/apis/api/datalineage.googleapis.com/overview?project=<project_id>
then retry. If you enabled this API recently, wait a few minutes for the action
to propagate to our systems and retry.

Untuk mengatasi masalah ini, aktifkan Data Lineage API dan berikan peran Data Lineage Events Producer kepada Agen Layanan Cloud Data Fusion. Untuk mengetahui informasi selengkapnya, lihat Melihat silsilah di Dataplex.

Pipeline berjalan di versi Cloud Data Fusion yang tidak didukung

Masalah berikut terjadi saat instance Cloud Data Fusion diupgrade ke versi yang lebih tinggi dari 6.8.0, tetapi pipeline belum diupgrade:

Error calling the metadata consumer data-catalog-consumer:
java.lang.IllegalArgumentException: FQN for the asset is null.

Untuk mengatasi masalah ini, upgrade pipeline ke versi terbaru.

Tidak ada pesan dalam log dan tidak ada silsilah di Dataplex

Masalah berikut terjadi jika salah satu plugin yang digunakan dalam pipeline tidak mendukung traffic keluar lineage ke Dataplex:

Tidak ada pesan error atau berhasil di log dan tidak ada silsilah di Dataplex.

Untuk mengatasi masalah ini, pipeline Anda hanya boleh memuat plugin yang mendukung silsilah data di Dataplex.