Présentation de Data Catalog avec BigQuery

Ce document présente la relation entre Data Catalog et BigQuery.

Data Catalog est un service de gestion des métadonnées entièrement géré et évolutif au sein de Dataplex.

Cas d'utilisation de Data Catalog

BigQuery utilise Data Catalog pour effectuer les cas d'utilisation suivants :

  • Visualiser la traçabilité des données.
  • Rechercher les ressources auxquelles vous avez accès.
  • En ajoutant des tags de métadonnées à des ressources

Pour obtenir une description plus complète de Data Catalog, consultez la page Qu'est-ce que Data Catalog ?.

Fonctionnement de Data Catalog

Data Catalog peut regrouper les métadonnées depuis des sources de données BigQuery. Une fois vos métadonnées cataloguées, vous pouvez ajouter vos propres métadonnées à ces sources de données à l'aide de tags. Pour un projet BigQuery donné, Data Catalog catalogue automatiquement les métadonnées BigQuery sur les ensembles de données, les tables, les vues et les modèles. Data Catalog gère deux types de métadonnées : les métadonnées techniques et les métadonnées commerciales. Pour en savoir plus sur les métadonnées, consultez la section Métadonnées Data Catalog.

Recherche et découverte

Data Catalog offre une expérience de recherche puissante basée sur des prédicats pour les métadonnées techniques et métier associées à une entrée Data Catalog représentant une source de données BigQuery. Vous devez disposer des autorisations nécessaires pour lire les métadonnées d'une ressource afin de pouvoir appliquer la recherche et la découverte aux métadonnées. Data Catalog n'indexe pas les données d'une ressource. Data Catalog n'indexe que les métadonnées qui décrivent une source de données BigQuery.

Data Catalog contrôle certaines métadonnées telles que les tags générés par l'utilisateur. Pour toutes les métadonnées provenant de BigQuery, Data Catalog est un service en lecture seule qui reflète les métadonnées et les autorisations fournies par BigQuery. Vous pouvez effectuer des modifications dans BigQuery pour ajouter, mettre à jour ou supprimer les métadonnées d'une entrée de données.

Pour en savoir plus sur la recherche dans Data Catalog, consultez Rechercher des ressources BigQuery.

Accéder à Data Catalog

Vous pouvez accéder aux fonctionnalités de Data Catalog à l'aide des interfaces suivantes :

Étapes suivantes