Les entrées et les groupes d'entrées sont des concepts clés de Data Catalog. L'illustration suivante montre comment ils s'intègrent dans le modèle de données de Data Catalog.
Entrées
Les entrées Data Catalog représentent des ressources de données :
- des ressources Google Cloud telles qu'une table ou un ensemble de données BigQuery, un sujet Pub/Sub, etc.
- Ressources personnalisées avec des types de données personnalisés
Vous pouvez créer, rechercher et gérer vos entrées. Pour plus d'informations, consultez la page Créer des entrées Data Catalog personnalisées pour vos sources de données.
Groupes d'entrées
Les entrées sont contenues dans un groupe d'entrées. Un groupe d'entrées est un ensemble d'entrées associées de manière logique à des stratégies Identity and Access Management qui spécifient les utilisateurs pouvant créer, modifier et afficher les entrées d'un groupe d'entrées.
Data Catalog crée automatiquement des groupes d'entrées pour les ressources Google Cloud, tels que BigQuery (@bigquery
) et les sujets Pub/Sub (@pubsub
).
Les groupes d'entrées BigQuery et Pub/Sub sont uniques, car vous ne pouvez pas exécuter les fonctions d'API qui fonctionnent généralement sur des groupes d'entrées personnalisés. comme la récupération de la liste des groupes d'entrées d'un projet, la récupération des informations de base sur un groupe d'entrées, et la création ou la suppression d'un tag.
Vous pouvez créer votre propre groupe d'entrées pour regrouper les entrées de votre ensemble de fichiers Cloud Storage et les stratégies IAM associées à ces entrées. Pour en savoir plus, consultez la page Afficher des fichiers depuis Cloud Storage avec des entrées d'ensembles de fichiers.
Les groupes d'entrées, comme les entrées, sont inclus dans l'index de recherche.
Mapper des éléments de données avec des entrées et des groupes d'entrées
Reportez-vous aux tableaux suivants pour découvrir comment Data Catalog mappe les éléments de données de différents produits Google Cloud.
Ressource Dataproc Metastore | Ressource Data Catalog |
---|---|
Service | Entrées et groupe d'entrées |
Base de données | Entrée |
Table | Entrée |
Ressource Dataplex | Ressource Data Catalog |
---|---|
Lac | Entrées et groupe d'entrées |
Zone | Entrée |
Table | Entrée |
Ensemble de fichiers | Entrée |
Ressource Pub/Sub | Ressource Data Catalog |
---|---|
Thème | Entrée dans un groupe d'entrées Pub/Sub |
Ressource Bigtable | Ressource Data Catalog |
---|---|
Instance | Entrées et groupe d'entrées |
Cluster | Attribut dans une entrée d'instance |
Table | Entrée dans le groupe d'entrées d'instance |
Familles de colonnes | Attribut dans une entrée de table |
Ressource BigQuery | Ressource Data Catalog |
---|---|
Ensemble de données | Entrée dans un groupe d'entrées BigQuery |
Ensemble de données associé | Entrée dans un groupe d'entrées BigQuery |
Table | Entrée dans un groupe d'entrées BigQuery |
Afficher | Entrée dans un groupe d'entrées BigQuery |
Livraison | Entrée dans un groupe d'entrées BigQuery |
Routine | Entrée dans un groupe d'entrées BigQuery |
Connexion | Entrée dans un groupe d'entrées BigQuery |
Ressource Vertex AI | Ressource Data Catalog |
---|---|
Livraison | Entrée dans un groupe d'entrées Vertex AI |
Ensemble de données | Entrée dans un groupe d'entrées Vertex AI |
FeatureGroup | Entrée dans un groupe d'entrées Vertex AI |
FeatureOnlineStore | Entrée dans un groupe d'entrées Vertex AI |
FeatureView | Entrée dans un groupe d'entrées Vertex AI |