Menggunakan garis keturunan data dengan sistem Google Cloud

Silsilah data menampilkan hubungan antara resource project Anda dan proses yang membuatnya.

Anda dapat melihat informasi asal data di konsol Google Cloud dalam bentuk berikut:

• Grafik silsilah: menampilkan silsilah yang berada di hulu atau hilir dari satu entri root. Untuk mengetahui informasi selengkapnya, lihat Grafik silsilah.
• Visualisasi jalur silsilah (Pratinjau): menampilkan link silsilah antara dua resource yang dipilih. Untuk mengetahui informasi selengkapnya, lihat Visualisasi jalur silsilah.
• Tampilan daftar silsilah (Pratinjau): menampilkan informasi silsilah mendetail untuk resource dalam satu tabel yang mencakup informasi silsilah untuk resource dengan banyak koneksi. Untuk mengetahui informasi selengkapnya, lihat Tampilan daftar silsilah.

Tips: Jika ini adalah pertama kalinya Anda menggunakan silsilah data, sebaiknya ikuti panduan memulai cepat: Melacak silsilah data untuk tabel BigQuery.

Anda juga dapat mengambil informasi silsilah dari Data Lineage API dalam bentuk data JSON.

Silsilah direkam di seluruh project. Saat melihat silsilah yang dibuat dari beberapa project, Anda dapat melihat informasi silsilah gabungan di salah satu project yang relevan.

Perhatian: Silsilah data diaktifkan berdasarkan per project, bukan per layanan. Setelah Anda mengaktifkan Data Lineage API, informasi silsilah akan otomatis dilaporkan untuk beberapa layanan Google Cloud dalam project, bergantung pada kontrol silsilah tingkat produknya. Untuk mengetahui detail selengkapnya, lihat Pertimbangan silsilah data.

Bergantung pada volume data yang diproses, silsilah data memerlukan waktu untuk menampilkan grafik. Sebagian besar tugas memerlukan waktu tiga jam, dan beberapa tugas dapat memerlukan waktu hingga 24 jam.

Peran dan izin

Untuk melihat informasi silsilah, minta administrator Anda untuk memberi Anda peran pelihat seperti yang dijelaskan dalam Peran standar untuk silsilah data. Anda harus memiliki akses di project tempat Anda melihat silsilah, dan project tempat silsilah dicatat.

Katalog Universal Dataplex melacak informasi silsilah secara otomatis saat Anda mengaktifkan Data Lineage API. Anda tidak memerlukan peran administrator atau editor untuk merekam silsilah aset data Anda.

Untuk mengetahui informasi selengkapnya tentang cara memberikan peran, lihat Mengelola akses. Anda dapat menetapkan peran di tingkat folder atau organisasi yang lebih tinggi (lihat Memberikan atau mencabut satu peran).

Mengaktifkan silsilah data

Aktifkan silsilah data untuk mulai melacak informasi silsilah secara otomatis untuk sistem yang didukung. Anda harus mengaktifkan Data Lineage API di project tempat Anda melihat silsilah, dan project tempat silsilah dicatat. Untuk mengetahui informasi selengkapnya, lihat Jenis project.

1. Untuk merekam informasi silsilah, lakukan hal berikut:

   1. Di konsol Google Cloud , pada halaman Pemilih project, pilih project tempat Anda ingin merekam silsilah.

      Buka Pemilih project

   2. Aktifkan Data Lineage API.

      Aktifkan Data Lineage API

   3. Ulangi langkah-langkah sebelumnya untuk setiap project yang ingin Anda rekam silsilahnya.

2. Di project tempat Anda melihat silsilah, aktifkan Data Lineage API dan Dataplex API.

   Aktifkan API

Melihat silsilah di Dataplex Universal Catalog

Anda dapat melihat informasi silsilah data di antarmuka web Katalog Universal Dataplex.

Untuk melihat silsilah, ikuti petunjuk berikut:

1. Di konsol Google Cloud , buka halaman Penelusuran Dataplex Universal Catalog.

   Buka Penelusuran

2. Pilih Dataplex Universal Catalog sebagai mode penelusuran.

3. Cari entri yang ingin Anda lihat informasi silsilahnya. Untuk mengetahui informasi selengkapnya, lihat Menelusuri resource di Dataplex Universal Catalog.

4. Di halaman detail entri, pilih tab Silsilah.

5. Untuk melihat grafik silsilah, klik Grafik.

   • Pilih tombol proses atau sumber data untuk menampilkan panel detail.

   • Untuk melihat informasi silsilah hulu atau hilir untuk suatu resource, klik Luaskan.

6. Untuk melihat asal data dalam tampilan daftar, klik Daftar.

7. Untuk melihat visualisasi jalur silsilah, klik Daftar, lalu pilih target resource dalam tabel hasil. Di panel detail, klik Target, lalu klik Visualize lineage.

Melihat silsilah di BigQuery

Anda dapat melihat informasi silsilah data di antarmuka web BigQuery.

Untuk melihat silsilah, ikuti petunjuk berikut:

1. Di konsol Google Cloud , buka halaman BigQuery.

   Buka halaman BigQuery

2. Buka tabel yang silsilah datanya ingin Anda lihat.

3. Klik tab Silsilah.

4. Untuk melihat grafik silsilah, klik Grafik.

   • Pilih tombol proses atau sumber data untuk menampilkan panel detail.

   • Untuk melihat informasi silsilah hulu atau hilir untuk suatu resource, klik Luaskan.

5. Untuk melihat asal data dalam tampilan daftar, klik Daftar.

6. Untuk melihat visualisasi jalur silsilah, klik Daftar, lalu pilih target resource dalam tabel hasil. Di panel detail, klik Target, lalu klik Visualize lineage.

Melihat garis keturunan di Vertex AI

Sistem seperti Vertex AI Pipelines menghasilkan data silsilah untuk model dan set data Vertex AI. Anda dapat melihat informasi garis keturunan data di antarmuka web UI Vertex AI.

Catatan: Untuk melihat silsilah operasi Vertex AI, seperti data pelatihan, pengujian, dan evaluasi yang digunakan atau hyperparameter yang diterapkan, lihat Melacak silsilah artefak pipeline.

Melihat garis keturunan untuk set data terkelola di Vertex AI

Untuk melihat silsilah dataset, ikuti petunjuk berikut:

1. Di konsol Google Cloud , buka halaman Datasets.

   Buka halaman Set Data

2. Klik set data yang ingin Anda lihat asal-usul datanya.

3. Klik tab Silsilah.

4. Untuk melihat grafik silsilah, klik Grafik.

   • Pilih tombol proses atau sumber data untuk menampilkan panel detail.

   • Untuk melihat informasi silsilah hulu atau hilir untuk suatu resource, klik Luaskan.

5. Untuk melihat asal data dalam tampilan daftar, klik Daftar.

6. Untuk melihat visualisasi jalur silsilah, klik Daftar, lalu pilih target resource dalam tabel hasil. Di panel detail, klik Target, lalu klik Visualize lineage.

Catatan: Pada grafik silsilah, proses Vertex AI didahului oleh . Proses ini mencakup komponen dan template Vertex AI Pipelines, serta artefak, set data, dan model Vertex ML Metadata. Jika proses dikatalogkan di Dataplex Universal Catalog dengan nama domain yang sepenuhnya memenuhi syarat (FQN), Anda dapat mengklik entri dalam grafik silsilah untuk melihat detailnya. Atau, untuk melihat detail grafik silsilah di Vertex AI, klik Open in Vertex AI di panel Details.

Melihat garis keturunan untuk model di Vertex AI

Untuk melihat silsilah model, ikuti petunjuk berikut:

1. Di konsol Google Cloud , buka halaman Model Registry.

   Buka halaman Model Registry

2. Klik model yang ingin Anda lihat asal datanya.

3. Klik tab Silsilah.

4. Untuk melihat grafik silsilah, klik Grafik.

   • Pilih tombol proses atau sumber data untuk menampilkan panel detail.

   • Untuk melihat informasi silsilah hulu atau hilir untuk suatu resource, klik Luaskan.

5. Untuk melihat asal data dalam tampilan daftar, klik Daftar.

6. Untuk melihat visualisasi jalur silsilah, klik Daftar, lalu pilih target resource dalam tabel hasil. Di panel detail, klik Target, lalu klik Visualize lineage.

Catatan: Pada grafik silsilah, proses Vertex AI didahului oleh . Proses ini mencakup komponen dan template Vertex AI Pipelines, serta artefak, set data, dan model Vertex ML Metadata. Jika proses dikatalogkan di Dataplex Universal Catalog dengan nama domain yang sepenuhnya memenuhi syarat (FQN), Anda dapat mengklik entri dalam grafik silsilah untuk melihat detailnya. Atau, untuk melihat detail grafik silsilah di Vertex AI, klik Open in Vertex AI di panel Details.

Langkah berikutnya

• Melacak silsilah data untuk tugas kueri dan penyalinan tabel BigQuery.

• Pelajari Model informasi silsilah data.