Gérer les métadonnées des dépôts Dataform avec Dataplex

Ce document explique comment utiliser Dataplex pour afficher les métadonnées des dépôts Dataform et les annoter avec des aspects.

Dataplex vous permet de stocker et de gérer vos métadonnées. Les dépôts Dataform sont disponibles dans Dataplex par défaut, sans configuration supplémentaire. Dataplex récupère automatiquement les métadonnées suivantes à partir des dépôts Dataform:

  • Nom de l'élément de données
  • Élément de données parent
  • Emplacement de l'élément de données
  • Type d'élément de données
  • Projet Google Cloud correspondant
  • Source du dépôt tiers
  • Compte de service

Avant de commencer

  1. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

    Go to project selector

  2. Enable the Dataplex API.

    Enable the API

  3. Vérifiez que vous disposez des autorisations IAM (Identity and Access Management) nécessaires.

Rôles requis

Pour gérer des dépôts Dataform dans Dataplex, vous avez besoin des rôles Dataform prédéfinis qui vous donnent accès aux ressources Dataform, ainsi que des rôles Dataplex requis.

Gérer les métadonnées dans Dataplex

Dataplex consigne les dépôts Dataform en tant que entrées avec les valeurs d'entrée suivantes:

Groupe d'entrées système
Le groupe d'entrées système pour les dépôts Dataform est @dataform. Pour afficher les détails des entrées de dépôt dans Dataplex, vous devez afficher le groupe d'entrées système dataform. Pour savoir comment afficher la liste de toutes les entrées d'un groupe d'entrées, consultez la section Afficher les détails d'un groupe d'entrées dans la documentation Dataplex.
Type d'entrée du système
Le type d'entrée système pour les dépôts Dataform est dataform-repository. Pour afficher les détails des dépôts Dataform, vous devez afficher le type d'entrée système dataform-repository. Pour savoir comment afficher les détails d'un type d'entrée sélectionné, consultez la section Afficher les détails d'un type d'entrée dans la documentation Dataplex. Pour savoir comment afficher les détails d'une entrée sélectionnée, consultez la section Afficher les détails d'une entrée dans la documentation Dataplex.

Rechercher des composants

Pour savoir comment rechercher des éléments de données dans Dataplex, consultez la section Rechercher des éléments de données dans Dataplex de la documentation Dataplex.

Annoter des dépôts

Pour fournir un contexte supplémentaire aux dépôts Dataform dans Dataplex, vous pouvez annoter les entrées Dataform avec des aspects.

Le type d'aspect système des dépôts Dataform est dataform-repository.

Pour savoir comment annoter des entrées avec des aspects, consultez la section Gérer les aspects et enrichir les métadonnées dans la documentation Dataplex.

Limites

La gestion des dépôts Dataform dans Dataplex est disponible avec les limites suivantes:

  • Vous ne pouvez pas afficher ni gérer les éléments Dataform au niveau du fichier dans Dataplex (par exemple, les tables ou les vues).

Emplacements

Vous pouvez utiliser Dataplex pour gérer les dépôts Dataform à partir de tous les emplacements Dataform.

Quotas

La gestion des dépôts Dataform dans Dataplex est soumise aux quotas et limites Dataplex.

Tarifs

La gestion des dépôts Dataform dans Dataplex est soumise aux tarifs de Dataplex.

Étape suivante