Utilizza la derivazione dei dati con i sistemi di Google Cloud

La derivazione dei dati mostra le relazioni tra i componenti le risorse e i processi che le hanno create. Puoi visualizzare informazioni sulla derivazione dei dati sotto forma di visualizzazione di un grafico o visualizzazione elenco nella console Google Cloud oppure recuperala dalla API Data Lineage sotto forma di dati JSON.

La derivazione viene acquisita tra i progetti. Quando visualizzi la derivazione generata da più progetti, puoi visualizzare le informazioni di derivazione aggregate in qualsiasi dei progetti pertinenti.

Attenzione:la derivazione dei dati viene abilitata in base al progetto, non in base al servizio. Dopo aver abilitato l'API Data Lineage, le informazioni di derivazione vengono automaticamente per più servizi Google Cloud nel progetto, a seconda controllo della derivazione a livello di prodotto. Per maggiori dettagli, consulta Considerazioni sulla derivazione dei dati.

Ruoli e autorizzazioni

Per visualizzare le informazioni sulla derivazione, chiedi all'amministratore di concederti i ruoli di visualizzatore come descritto in Ruoli di derivazione dei dati predefiniti. Devi avere accesso sia al progetto in cui visualizzi la derivazione sia progetti in cui viene registrata la derivazione.

Data Catalog monitora automaticamente le informazioni sulla derivazione quando attivi l'API Data Lineage. Non hai bisogno di ruoli di amministratore o editor per acquisire la derivazione per il tuo asset di dati.

Per ulteriori informazioni sulla concessione dei ruoli, consulta Gestire l'accesso. Puoi assegnare un ruolo a un livello superiore di cartella o organizzazione (vedi Concedere o revocare un singolo ruolo).

Abilita derivazione dei dati

Abilita la derivazione dei dati per avviare il monitoraggio automatico della derivazione informazioni per sistemi supportati. Devi abilitare l'API Data Lineage sia nel progetto in cui visualizzi la derivazione e i progetti in cui è registrata la derivazione. Per ulteriori informazioni, vedi Tipi di progetto.

1. Per acquisire informazioni sulla derivazione:

   1. Nella console Google Cloud, nel selettore di progetti seleziona il progetto in cui vuoi registrare la derivazione.

      Vai al selettore progetti

   2. Abilita l'API Data Lineage.

      Abilita l'API Data Lineage

   3. Ripeti i passaggi precedenti per ogni progetto in cui vuoi da record.

2. Nel progetto in cui viene visualizzata la derivazione, abilita l'API Data Lineage e l'API Data Catalog.

   Abilita le API

Visualizza la derivazione nella UI Dataplex

Puoi visualizzare le informazioni sulla derivazione dei dati nella UI di Dataplex sotto forma di un grafico o un elenco.

I grafici di derivazione rappresentano le informazioni raccolte dall'API Data Lineage per un particolare voce.

. Figura 1. Esempio di un grafico di visualizzazione della derivazione nella UI di Dataplex.

di Gemini Advanced.

.

Nota: la derivazione dei dati potrebbe richiedere del tempo per visualizzare un grafico. Se non vedi immediatamente un grafico di derivazione, attendi un paio di minuti.

Viene visualizzata la visualizzazione elenco delle derivazioni (anteprima) informazioni dettagliate sulla derivazione per le entità in un che include informazioni sulla derivazione per entità con molte connessioni.

Per visualizzare la derivazione:

1. Apri la pagina di ricerca di Dataplex e trova l'asset per cui vuoi visualizzare le informazioni sulla derivazione.

   Apri la pagina di ricerca di Dataplex

   Per saperne di più, consulta Come cercare asset di dati.

2. Nella pagina dei dettagli della voce, seleziona la scheda Derivazione.

3. Seleziona i pulsanti di elaborazione o origine dati per visualizzare il riquadro dei dettagli.

4. Per visualizzare le informazioni sulla derivazione upstream o downstream per una risorsa, fai clic su Espandi.

5. Per visualizzare la derivazione nella visualizzazione elenco anziché nella visualizzazione grafico, fai clic su Elenco.

Visualizza la derivazione nella UI di BigQuery

Puoi visualizzare le informazioni sulla derivazione dei dati nella UI di BigQuery sotto forma di un grafico o un elenco (anteprima).

Per visualizzare la derivazione:

1. Nella console Google Cloud, vai alla pagina BigQuery.

   Apri la pagina BigQuery

2. Apri la tabella di cui vuoi visualizzare la derivazione dei dati.

3. Fai clic sulla scheda Derivazione.

4. Seleziona i pulsanti di elaborazione o origine dati per visualizzare il riquadro dei dettagli.

5. Per visualizzare le informazioni sulla derivazione upstream o downstream per una risorsa, fai clic su Espandi.

6. Per visualizzare la derivazione nella visualizzazione elenco anziché nella visualizzazione grafico, fai clic su Elenco.

Visualizza la derivazione nella UI di Vertex AI

Anteprima

Questa funzionalità è soggetta ai "Termini delle Offerte pre-GA" nella sezione Termini generali del servizio dei Termini specifici dei servizi. Le funzionalità pre-GA sono disponibili "così come sono" e potrebbero avere un supporto limitato. Per saperne di più, consulta le descrizioni della fase di lancio.

Sistemi come Vertex AI Pipelines generano dati di derivazione per Modelli e set di dati Vertex AI. Puoi visualizzare le informazioni sulla derivazione dei dati in La UI di Vertex AI sotto forma di grafico o elenco (anteprima).

Nota: per visualizzare la derivazione delle operazioni di Vertex AI, come dati di addestramento, test e valutazione utilizzati o gli iperparametri applicati, consulta Tieni traccia della derivazione degli artefatti della pipeline.

Visualizza la derivazione per un set di dati gestito in Vertex AI

Per visualizzare la derivazione per un set di dati:

1. Nella console Google Cloud, vai alla pagina Set di dati.

   Apri la pagina Set di dati

2. Fai clic sul set di dati di cui vuoi visualizzare la derivazione dei dati.

3. Fai clic sulla scheda Derivazione.

4. Seleziona i pulsanti di elaborazione o origine dati per visualizzare il riquadro dei dettagli.

5. Per visualizzare le informazioni sulla derivazione upstream o downstream per una risorsa, fai clic su Espandi.

6. Per visualizzare la derivazione nella visualizzazione elenco anziché nella visualizzazione grafico, fai clic su Elenco.

di Gemini Advanced.

Nota: nel grafico della derivazione, i processi di Vertex AI sono preceduti dalla , Questi processi includono componenti e modelli di Vertex AI Pipelines Artefatti, set di dati e modelli di Vertex ML Metadata. Se il processo è catalogati in Data Catalog con un nome di dominio completo (FQN), puoi fare clic sulla voce nel grafico della derivazione per visualizzarne i dettagli. In alternativa, per visualizzare i dettagli del grafico di derivazione in Vertex AI, fai clic su Apri in Vertex AI nel riquadro Dettagli.

Visualizza la derivazione per un modello in Vertex AI

Per visualizzare la derivazione di un modello:

1. Nella console Google Cloud, vai alla pagina Model Registry.

   Apri la pagina Model Registry

2. Fai clic sul modello per il quale vuoi visualizzare la derivazione dei dati.

3. Fai clic sulla scheda Derivazione.

4. Seleziona i pulsanti di elaborazione o origine dati per visualizzare il riquadro dei dettagli.

5. Per visualizzare le informazioni sulla derivazione upstream o downstream per una risorsa, fai clic su Espandi.

6. Per visualizzare la derivazione nella visualizzazione elenco anziché nella visualizzazione grafico, fai clic su Elenco.

di Gemini Advanced.

Nota: nel grafico della derivazione, i processi di Vertex AI sono preceduti dalla , Questi processi includono componenti e modelli di Vertex AI Pipelines Artefatti, set di dati e modelli di Vertex ML Metadata. Se il processo è catalogati in Data Catalog con un nome di dominio completo (FQN), puoi fare clic sulla voce nel grafico della derivazione per visualizzarne i dettagli. In alternativa, per visualizzare i dettagli del grafico di derivazione in Vertex AI, fai clic su Apri in Vertex AI nel riquadro Dettagli.

Passaggi successivi

• Monitora la derivazione dei dati per la copia di una tabella BigQuery e i job di query.

• Scopri di più sul modello di informazioni sulla derivazione dei dati.