Gestionar los metadatos de los repositorios de Dataform con Dataplex Universal Catalog

En este documento se describe cómo usar Dataplex Universal Catalog para ver los metadatos de los repositorios de Dataform y añadirles anotaciones con aspectos.

Dataplex Universal Catalog te permite almacenar y gestionar tus metadatos. Los repositorios de Dataform están disponibles en Dataplex Universal Catalog de forma predeterminada, sin necesidad de ninguna configuración adicional. Dataplex Universal Catalog recupera automáticamente los siguientes metadatos de los repositorios de Dataform:

  • Nombre del recurso de datos
  • Recurso de datos superior
  • Ubicación del recurso de datos
  • Tipo de recurso de datos
  • Proyecto Google Cloud correspondiente
  • Fuente de repositorio de terceros
  • Agente de servicio o cuenta de servicio

Antes de empezar

  1. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

    Roles required to select or create a project

    • Select a project: Selecting a project doesn't require a specific IAM role—you can select any project that you've been granted a role on.
    • Create a project: To create a project, you need the Project Creator (roles/resourcemanager.projectCreator), which contains the resourcemanager.projects.create permission. Learn how to grant roles.

    Go to project selector

  2. Enable the Dataplex API.

    Roles required to enable APIs

    To enable APIs, you need the Service Usage Admin IAM role (roles/serviceusage.serviceUsageAdmin), which contains the serviceusage.services.enable permission. Learn how to grant roles.

    Enable the API

  3. Asegúrate de que tienes los permisos de gestión de identidades y accesos (IAM) necesarios.

Roles obligatorios

Para gestionar repositorios de Dataform en Dataplex Universal Catalog, necesitas los roles predefinidos de Dataform, que te dan acceso a los recursos de Dataform, y los roles de Dataplex Universal Catalog necesarios.

Gestionar metadatos en Dataplex Universal Catalog

Dataplex Universal Catalog registra los repositorios de Dataform como entradas con los siguientes valores de entrada:

Grupo de entradas del sistema
El grupo de entradas del sistema de los repositorios de Dataform es @dataform. Para ver los detalles de las entradas del repositorio en Dataplex Universal Catalog, debes ver el dataform grupo de entradas del sistema. Para obtener instrucciones sobre cómo ver una lista de todas las entradas de un grupo de entradas, consulta Ver los detalles de un grupo de entradas en la documentación de Dataplex Universal Catalog.
Tipo de entrada del sistema
El tipo de entrada del sistema de los repositorios de Dataform es dataform-repository. Para ver los detalles de los repositorios de Dataform, debes ver el tipo de entrada del sistema dataform-repository. Para obtener instrucciones sobre cómo ver los detalles de un tipo de entrada seleccionado, consulta el artículo Ver los detalles de un tipo de entrada de la documentación de Universal Catalog de Dataplex. Para obtener instrucciones sobre cómo ver los detalles de una entrada seleccionada, consulta la sección Ver los detalles de una entrada de la documentación de Dataplex Universal Catalog.

Buscar recursos

Para obtener instrucciones sobre cómo buscar recursos de datos en Dataplex Universal Catalog, consulta el artículo Buscar recursos de datos en Dataplex Universal Catalog de la documentación de Dataplex Universal Catalog.

Anotar repositorios

Para proporcionar contexto adicional a los repositorios de Dataform en Dataplex Universal Catalog, puedes anotar las entradas de Dataform con aspectos.

El tipo de aspecto del sistema de los repositorios de Dataform es dataform-repository.

Para obtener instrucciones sobre cómo anotar entradas con aspectos, consulta el artículo Gestionar aspectos y enriquecer metadatos de la documentación de Dataplex Universal Catalog.

Limitaciones

La gestión de repositorios de Dataform en Dataplex Universal Catalog está disponible con las siguientes limitaciones:

  • No puedes ver ni gestionar recursos a nivel de archivo de Dataform en Dataplex Universal Catalog (por ejemplo, tablas o vistas).

Ubicaciones

Puedes usar Dataplex Universal Catalog para gestionar repositorios de Dataform desde todas las ubicaciones de Dataform.

Cuotas

La gestión de repositorios de Dataform en Dataplex Universal Catalog está sujeta a las cuotas y los límites de Dataplex Universal Catalog.

Precios

La gestión de repositorios de Dataform en Dataplex Universal Catalog está sujeta a los precios de Dataplex Universal Catalog.

Siguientes pasos