Les entrées et les groupes d'entrées sont des concepts clés de Data Catalog.
L'illustration suivante montre comment les entrées et les groupes d'entrées s'intègrent dans le modèle de données de Data Catalog.
Entrées
Les entrées Data Catalog représentent des ressources de données :
- Ressources Google Cloud, telles qu'un ensemble de données ou une table BigQuery, un sujet Pub/Sub, par exemple.
- Ressources personnalisées avec des types de données personnalisés
Vous pouvez créer, rechercher et gérer vos entrées. Pour plus d'informations, consultez la page Créer des entrées Data Catalog personnalisées pour vos sources de données.
Groupes d'entrées
Les entrées sont contenues dans un groupe d'entrées. Un groupe d'entrées est un ensemble d'entrées associées de manière logique à des stratégies Identity and Access Management qui spécifient les utilisateurs pouvant créer, modifier et afficher les entrées d'un groupe d'entrées.
Data Catalog crée automatiquement des groupes d'entrées pour des ressources Google Cloud, telles que BigQuery (@bigquery
) et les sujets Pub/Sub (@pubsub
).
Les groupes d'entrée BigQuery et Pub/Sub sont uniques, car vous ne pouvez pas exécuter de fonctions d'API qui fonctionnent généralement sur des groupes d'entrée personnalisés. Par exemple, vous pouvez récupérer la liste des groupes d'entrées d'un projet, récupérer des informations de base sur un groupe d'entrées et créer ou supprimer une balise.
Vous pouvez créer votre propre groupe d'entrées pour regrouper les entrées de votre ensemble de fichiers Cloud Storage et les stratégies IAM associées à ces entrées. Pour en savoir plus, consultez la page Afficher des fichiers depuis Cloud Storage avec des entrées d'ensembles de fichiers.
Tout comme les entrées, les groupes d'entrées sont inclus dans l'index de recherche.
Mapper les éléments de données avec les entrées et les groupes d'entrées
Consultez les tableaux suivants pour découvrir comment Data Catalog mappe les éléments de données à partir de différents produits Google Cloud.
Ressource Dataproc Metastore | Ressource Data Catalog |
---|---|
Service | Groupe d'entrées |
Base de données | Entrée |
Table | Entrée |
Ressource Dataplex | Ressource Data Catalog |
---|---|
Lac | Groupe d'entrées |
Zone | Entrée |
Table | Entrée |
Ensemble de fichiers | Entrée |
Ressource Pub/Sub | Ressource Data Catalog |
---|---|
Thème | Entrée dans un groupe d'entrées Pub/Sub |
Ressource Bigtable | Ressource Data Catalog |
---|---|
Instance | Groupe d'entrées |
Cluster | Attribut dans une entrée d'instance |
Tableau | Entrée dans le groupe d'entrées de l'instance |
Familles de colonnes | Attribut dans une entrée de tableau |
Ressource BigQuery | Ressource Data Catalog |
---|---|
Ensemble de données | Saisie dans un groupe d'entrées BigQuery |
Ensemble de données associé | Saisie dans un groupe d'entrées BigQuery |
Tableau | Entrée dans un groupe d'entrées BigQuery |
Afficher | Entrée dans un groupe d'entrées BigQuery |
Modèle | Entrée dans un groupe d'entrées BigQuery |
Routine | Saisie dans un groupe d'entrées BigQuery |
Connexion | Saisie dans un groupe d'entrées BigQuery |
Ressource Vertex AI | Ressource Data Catalog |
---|---|
Modèle | Entrée dans un groupe d'entrées Vertex AI |
Ensemble de données | Enregistrement dans un groupe d'enregistrements Vertex AI |
FeatureGroup | Enregistrement dans un groupe d'enregistrements Vertex AI |
FeatureOnlineStore | Enregistrement dans un groupe d'enregistrements Vertex AI |
FeatureView | Entrée dans un groupe d'entrées Vertex AI |