Modifiche ai metadati di BigQuery archiviati in Dataplex Catalog

Tra il 15 ottobre 2024 e il 15 novembre 2024, alcuni dei metadati di BigQuery archiviati in Dataplex Catalog cambieranno.

Questa modifica applica i metadati archiviati Dataplex Catalog per ottenere coerenza con BigQuery e metadati da altre origini Google Cloud.

Se hai carichi di lavoro che dipendono dai metadati di BigQuery, devi modificarli per preservare la continuità.

Per ulteriori informazioni sui metadati Dataplex Catalog, consulta Panoramica di Dataplex Catalog.

Ambito delle modifiche

Le modifiche descritte in questa sezione si applicano a tutte le voci BigQuery. Le voci BigQuery appartengono a un tipo di voce nel sistema BigQuery.

I seguenti metodi dell'API sono interessati da queste modifiche:

• lookupEntry
• entryGroups.entries.get

Le modifiche ai valori dei tipi di dati e dei sottotipi di tabella si riflettono anche nella console Google Cloud, nella pagina Dettagli voce.

Valori del tipo di dati

I valori del tipo di dati stanno cambiando per il tipo di aspetto SchemaAspect. Il campo dataType è interessato.

Valore prima della modifica	Valore dopo la modifica
INT64	INTEGER
FLOAT64	FLOAT
STRUCT	RECORD
BOOL	BOOLEAN

Nomi delle risorse

Il nome della risorsa sta cambiando per il campo di immissione di primo livello entrySource.resource. Il campo è stato modificato per contenere l'ID risorsa anziché il nome completo della risorsa.

Valore prima della modifica	Valore dopo la modifica
//bigquery.googleapis.com/projects/PROJECT_ID/datasets/DATASET/tables/TABLE	projects/PROJECT_ID/datasets/DATASET/tables/TABLE

Valori del tipo predecessore

Il valore del tipo di predecessore sta cambiando per il campo di immissione di primo livello entrySource.ancestors.type.

Valore prima della modifica	Valore dopo la modifica
655216118709.global.Dataset	dataplex-types.global.bigquery-dataset

Che cosa devi fare

Il periodo di implementazione inizia il 15 ottobre 2024 e termina il 15 novembre 2024. Le modifiche ai metadati di BigQuery verranno applicate gradualmente durante il periodo di implementazione.

Ecco cosa devi fare:

• Prima del 15 ottobre 2024: aggiorna i carichi di lavoro per interpretare sia i carichi di lavoro legacy dei metadati e la versione aggiornata dei metadati.

• Durante il periodo di implementazione: le voci BigQuery potrebbero acquisire la versione precedente dei metadati o la versione aggiornata. I tuoi carichi di lavoro dovrebbe essere in grado di interpretare entrambe le versioni.

  Per determinare se una voce BigQuery utilizza i metadati aggiornati, nell'oggetto aspects della voce, individua il tipo di aspetto pertinente. Nell'aspetto l'oggetto aspectSource del tipo, il campo data_version indica i metadati completamente gestita. Ad esempio, per una voce bigquery-table, fai riferimento al campo Entry.aspects.dataplex-types.global.bigquery-table.aspectSource.data_version.

  Utilizza la versione legacy dei metadati	Utilizza la versione aggiornata dei metadati
  "" (stringa vuota)	"Ingestion/1.0.0"

• Dopo il 15 novembre 2024: in via facoltativa, puoi aggiornare i carichi di lavoro affinché vengano interpretati la nuova versione dei metadati.

Assistenza

Per domande, contatta [e-mail].