Administra los metadatos de los repositorios de Dataform con el catálogo universal de Dataplex

En este documento, se describe cómo usar Dataplex Universal Catalog para ver los metadatos de los repositorios de Dataform y anotarlos con aspectos.

Dataplex Universal Catalog te permite almacenar y administrar tus metadatos. Los repositorios de Dataform están disponibles en Dataplex Universal Catalog de forma predeterminada, sin necesidad de configuración adicional. Dataplex Universal Catalog recupera automáticamente los siguientes metadatos de los repositorios de Dataform:

  • Nombre del recurso de datos
  • Recurso de datos principal
  • Ubicación del recurso de datos
  • Tipo de recurso de datos
  • Proyecto Google Cloud correspondiente
  • Fuente del repositorio de terceros
  • Agente de servicio o cuenta de servicio

Antes de comenzar

  1. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

    Roles required to select or create a project

    • Select a project: Selecting a project doesn't require a specific IAM role—you can select any project that you've been granted a role on.
    • Create a project: To create a project, you need the Project Creator (roles/resourcemanager.projectCreator), which contains the resourcemanager.projects.create permission. Learn how to grant roles.

    Go to project selector

  2. Enable the Dataplex API.

    Roles required to enable APIs

    To enable APIs, you need the Service Usage Admin IAM role (roles/serviceusage.serviceUsageAdmin), which contains the serviceusage.services.enable permission. Learn how to grant roles.

    Enable the API

  3. Asegúrate de tener los permisos de Identity and Access Management (IAM) necesarios.

Roles requeridos

Para administrar repositorios de Dataform en Dataplex Universal Catalog, necesitas los roles predefinidos de Dataform que te brindan acceso a los recursos de Dataform y los roles de Dataplex Universal Catalog requeridos.

Administra metadatos en Dataplex Universal Catalog

Dataplex Universal Catalog registra los repositorios de Dataform como entradas con los siguientes valores de entrada:

Grupo de entrada del sistema
El grupo de entradas del sistema para los repositorios de Dataform es @dataform. Para ver los detalles de las entradas del repositorio en Dataplex Universal Catalog, debes ver el grupo de entradas del sistema dataform. Si deseas obtener instrucciones para ver una lista de todas las entradas de un grupo de entradas, consulta Cómo ver los detalles de un grupo de entradas en la documentación de Dataplex Universal Catalog.
Tipo de entrada del sistema
El tipo de entrada del sistema para los repositorios de Dataform es dataform-repository. Para ver los detalles de los repositorios de Dataform, debes ver el tipo de entrada del sistema dataform-repository. Para obtener instrucciones sobre cómo ver los detalles de un tipo de entrada seleccionado, consulta Cómo ver los detalles de un tipo de entrada en la documentación de Dataplex Universal Catalog. Para obtener instrucciones sobre cómo ver los detalles de una entrada seleccionada, consulta Cómo ver los detalles de una entrada en la documentación de Dataplex Universal Catalog.

Buscar activos

Para obtener instrucciones sobre cómo buscar recursos de datos en Dataplex Universal Catalog, consulta Cómo buscar recursos de datos en Dataplex Universal Catalog en la documentación de Dataplex Universal Catalog.

Cómo anotar repositorios

Para proporcionar contexto adicional a los repositorios de Dataform en Dataplex Universal Catalog, puedes anotar las entradas de Dataform con aspectos.

El tipo de aspecto del sistema para los repositorios de Dataform es dataform-repository.

Si deseas obtener instrucciones para anotar entradas con aspectos, consulta Administra aspectos y enriquece los metadatos en la documentación de Dataplex Universal Catalog.

Limitaciones

La administración de repositorios de Dataform en Dataplex Universal Catalog está disponible con las siguientes limitaciones:

  • No puedes ver ni administrar los recursos a nivel de archivo de Dataform en Dataplex Universal Catalog, por ejemplo, tablas o vistas.

Ubicaciones

Puedes usar Dataplex Universal Catalog para administrar repositorios de Dataform desde todas las ubicaciones de Dataform.

Cuotas

La administración de repositorios de Dataform en Dataplex Universal Catalog está sujeta a las cuotas y los límites de Dataplex Universal Catalog.

Precios

La administración de repositorios de Dataform en Dataplex Universal Catalog está sujeta a los precios de Dataplex Universal Catalog.

¿Qué sigue?