Google Cloud システムでデータリネージを使用する

Google Cloud プロジェクトでデータリネージを有効にして、サポートされているシステムのリネージ情報を自動的に追跡します。

注: データリネージは、プロジェクトごとに有効になります。Data Lineage API を有効にすると、プロダクト レベルのリネージ制御に応じて、複数の Google Cloud サービスについてリネージ情報が自動的にレポートされます。 詳しくは、データリネージに関する考慮事項をご覧ください。

ロールと権限

Data Catalog は、Data Lineage API を有効にすると、リネージ情報を自動的に追跡します。データアセットのリネージをキャプチャして Google Cloud コンソールでリネージにアクセスするために管理者または編集者のロールは必要ありません。Identity and Access Management セクションで説明されている標準の閲覧者ロールで十分です。ロールの付与の詳細については、アクセスの管理をご覧ください。より上位のフォルダレベルまたは組織レベルでロールを割り当てることができます（単一ロールの付与または取り消しをご覧ください）。

データ系列を有効にする

1. Google Cloud コンソールの [プロジェクト セレクタ] ページで、リネージを追跡するリソースを含むプロジェクトを選択します。

   プロジェクト セレクタに移動

2. Data Lineage API と Data Catalog API を有効にします。

   API を有効にする

Dataplex UI でリネージグラフを表示する

リネージの可視化グラフには、プロジェクト リソースとそれらを作成したプロセスの関係が表示されます。データリネージ情報は、Google Cloud コンソールでグラフの可視化の形式で、または JSON データの形式で Data Lineage API から取得できます。

注: データリネージがグラフを表示するまでに時間がかかることがあります。リネージグラフがすぐに表示されない場合は、数分待ちます。

1. Dataplex の検索ページを開き、リネージ情報を表示するアセットを見つけます。

   Dataplex の検索ページを開く

   詳細については、データアセットを検索する方法をご覧ください。

2. エントリの詳細ページで、[リネージ] タブを選択します。

   

   図 1: Dataplex UI のリネージ可視化グラフの例。

3. プロセスまたはデータソースのボタンを選択して、詳細パネルを表示します。

4. リソースのアップストリームまたはダウンストリームのリネージ情報を表示するには、 [展開] をクリックします。

BigQuery UI でリネージグラフを表示する

リネージグラフは BigQuery UI で直接表示できます。

1. Google Cloud コンソールで BigQuery ページに移動します。

   [BigQuery] ページを開く

2. データリネージを表示するテーブルを開きます。
3. [リネージ] タブをクリックします。
4. プロセスまたはデータソースのボタンを選択して、詳細パネルを表示します。
5. リソースのアップストリームまたはダウンストリームのリネージ情報を表示するには、 [展開] をクリックします。

Vertex AI UI でリネージグラフを表示する

プレビュー — data lineage

この機能には、サービス固有の利用規約の「一般的なサービス規約」の「pre-GA サービス規約」が適用されます。 pre-GA の機能は「現状有姿」で利用できますが、サポートが制限される場合があります。 詳しくは、リリース ステージの説明をご覧ください。

Vertex AI Pipelines などのシステムでは、Vertex AI モデルとデータセットのリネージデータを生成します。リネージグラフは Vertex AI UI で直接表示できます。

注: 使用するトレーニング、テスト、評価データ、適用されるハイパーパラメータなど、Vertex AI のオペレーションのリネージを表示するには、パイプライン アーティファクトのリネージを追跡するをご覧ください。

Vertex AI でマネージド データセットのリネージグラフを表示する

データセットのリネージ グラフを表示する手順は次のとおりです。

1. Google Cloud コンソールで、[データセット] ページに移動します。

   [データセット] ページを開く

2. データリネージを表示するデータセットをクリックします。
3. [リネージ] タブをクリックします。
4. プロセスまたはデータソースのボタンを選択して、詳細パネルを表示します。
5. リソースのアップストリームまたはダウンストリームのリネージ情報を表示するには、 [展開] をクリックします。

注: リネージ グラフでは、Vertex AI プロセスの前に が付いています。これらのプロセスには、Vertex AI Pipelines のコンポーネントとテンプレート、Vertex ML Metadata のアーティファクト、データセット、モデルが含まれます。プロセスが完全修飾ドメイン名（FQN）で Data Catalog にカタログ化されている場合は、リネージ グラフのエントリをクリックして詳細を表示できます。または、Vertex AI でリネージグラフの詳細を表示するには、[詳細] ペインで [Vertex AI で開く] をクリックします。

Vertex AI でモデルのリネージグラフを表示する

モデルのリネージ グラフを表示する手順は次のとおりです。

1. Google Cloud コンソールの [Model Registry] ページに移動します。

   [Model Registry] ページを開く

2. データリネージを表示するモデルをクリックします。
3. [リネージ] タブをクリックします。
4. プロセスまたはデータソースのボタンを選択して、詳細パネルを表示します。
5. リソースのアップストリームまたはダウンストリームのリネージ情報を表示するには、 [展開] をクリックします。

注: リネージ グラフでは、Vertex AI プロセスの前に が付いています。これらのプロセスには、Vertex AI Pipelines のコンポーネントとテンプレート、Vertex ML Metadata のアーティファクト、データセット、モデルが含まれます。プロセスが完全修飾ドメイン名（FQN）で Data Catalog にカタログ化されている場合は、リネージ グラフのエントリをクリックして詳細を表示できます。または、Vertex AI でリネージグラフの詳細を表示するには、[詳細] ペインで [Vertex AI で開く] をクリックします。

次のステップ

• BigQuery テーブルのコピージョブとクエリジョブのデータリネージを追跡する。

• データリネージ情報モデルについて確認する。