Entre le 15 octobre 2024 et le 15 novembre 2024, certaines des métadonnées BigQuery stockées dans le catalogue Dataplex changeront.
Ce changement a pour effet d'introduire les métadonnées mettre en cohérence le catalogue Dataplex avec BigQuery des métadonnées provenant d'autres sources Google Cloud.
Si vos charges de travail dépendent des métadonnées BigQuery, vous devez les ajuster pour préserver la continuité.
Pour en savoir plus sur les métadonnées du catalogue Dataplex, consultez Présentation du catalogue Dataplex
Portée des modifications
Les modifications décrites dans cette section s'appliquent à toutes les entrées BigQuery. Les entrées BigQuery appartiennent à un type d'entrée dans le système BigQuery.
Les méthodes d'API suivantes sont concernées par ces modifications :
Les modifications apportées aux valeurs de type de données et de sous-type de table sont également reflétées dans dans la console Google Cloud, sur la page "Détails de l'entrée".
Valeurs de type de données
Les valeurs du type de données changent pour le type d'aspect SchemaAspect
. Le champ dataType
est concerné.
Valeur avant la modification | Valeur après la modification |
---|---|
INT64 |
INTEGER |
FLOAT64 |
FLOAT |
STRUCT |
RECORD |
BOOL |
BOOLEAN |
Noms de ressources
Le nom de la ressource change pour le champ de saisie de premier niveau
entrySource.resource
Le champ est modifié pour contenir l'ID de ressource
au lieu du nom complet de la ressource.
Valeur avant la modification | Valeur après la modification |
---|---|
//bigquery.googleapis.com/projects/PROJECT_ID/datasets/DATASET/tables/TABLE |
projects/PROJECT_ID/datasets/DATASET/tables/TABLE |
Valeurs du type d'ancêtre
La valeur du type d'ancêtre change pour le champ d'entrée de premier niveau
entrySource.ancestors.type
Valeur avant modification | Valeur après la modification |
---|---|
655216118709.global.Dataset |
dataplex-types.global.bigquery-dataset |
Que devez-vous faire ?
La période de déploiement commence le 15 octobre 2024 et se termine le 15 novembre 2024. Les modifications apportées aux métadonnées BigQuery seront appliquées progressivement tout au long de la période de déploiement.
Voici ce que vous devez faire :
- Avant le 15 octobre 2024: mettez à jour vos charges de travail pour interpréter à la fois les anciens et la version mise à jour des métadonnées.
Pendant la période de déploiement: les entrées BigQuery peuvent capturer les l'ancienne version des métadonnées ou la version mise à jour des métadonnées. Vos charges de travail doivent pouvoir interpréter les deux versions.
Pour déterminer si une entrée BigQuery utilise les métadonnées mises à jour, Dans l'objet
aspects
de l'entrée, localisez le type d'aspect approprié. Dans l'objetaspectSource
du type d'aspect, le champdata_version
indique la version des métadonnées. Par exemple, pour une entréebigquery-table
, reportez-vous au champEntry.aspects.dataplex-types.global.bigquery-table.aspectSource.data_version
.Utilise l'ancienne version des métadonnées Utilise la version mise à jour des métadonnées ""
(chaîne vide)"Ingestion/1.0.0"
Après le 15 novembre 2024: vous pouvez éventuellement mettre à jour vos charges de travail pour interpréter uniquement la nouvelle version des métadonnées.
Assistance
Pour toute question, contactez dataplex-msa-support@google.com.