Administra los metadatos de los repositorios de Dataform con Dataplex

En este documento, se describe cómo usar Dataplex para ver los metadatos de los repositorios de Dataform y anotarlos con aspectos.

Dataplex te permite almacenar y administrar tus metadatos. Los repositorios de Dataform están disponibles en Dataplex de forma predeterminada, sin ninguna configuración adicional. Dataplex recupera automáticamente los siguientes metadatos de los repositorios de Dataform:

  • Nombre del recurso de datos
  • Elemento superior del recurso de datos
  • Ubicación del recurso de datos
  • Tipo de recurso de datos
  • Proyecto de Google Cloud correspondiente
  • Fuente del repositorio de terceros
  • Cuenta de servicio

Antes de comenzar

  1. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

    Go to project selector

  2. Enable the Dataplex API.

    Enable the API

  3. Asegúrate de tener los permisos de Identity and Access Management (IAM) necesarios.

Roles obligatorios

Para administrar repositorios de Dataform en Dataplex, necesitarás los roles predefinidos de Dataform que te brindan acceso a los recursos de Dataform y los roles de Dataplex obligatorios.

Administra metadatos en Dataplex

Dataplex registra los repositorios de Dataform como entradas con los siguientes valores de entrada:

Grupo de entrada del sistema
El grupo de entrada del sistema para los repositorios de Dataform es @dataform. Para ver los detalles de las entradas del repositorio en Dataplex, debes ver el grupo de entradas del sistema dataform. Para obtener instrucciones sobre cómo ver una lista de todas las entradas de un grupo de entradas, consulta Cómo ver los detalles de un grupo de entradas en la documentación de Dataplex.
Tipo de entrada del sistema
El tipo de entrada del sistema para los repositorios de Dataform es dataform-repository. Para ver los detalles de los repositorios de Dataform, debes ver el tipo de entrada del sistema dataform-repository. Para obtener instrucciones sobre cómo ver los detalles de un tipo de entrada seleccionado, consulta Cómo ver los detalles de un tipo de entrada en la documentación de Dataplex. Para obtener instrucciones sobre cómo ver los detalles de una entrada seleccionada, consulta Cómo ver los detalles de una entrada en la documentación de Dataplex.

Busca recursos

Para obtener instrucciones sobre cómo buscar recursos de datos en Dataplex, consulta Cómo buscar recursos de datos en Dataplex en la documentación de Dataplex.

Cómo anotar repositorios

Para proporcionar contexto adicional a los repositorios de Dataform en Dataplex, puedes anotar las entradas de Dataform con aspectos.

El tipo de aspecto del sistema para los repositorios de Dataform es dataform-repository.

Para obtener instrucciones sobre cómo anotar entradas con aspectos, consulta Administra los aspectos y enriquece los metadatos en la documentación de Dataplex.

Limitaciones

La administración de repositorios de Dataform en Dataplex está disponible con las siguientes limitaciones:

  • No puedes ver ni administrar los recursos a nivel de archivo de Dataform en Dataplex, por ejemplo, tablas o vistas.

Ubicaciones

Puedes usar Dataplex para administrar repositorios de Dataform desde todas las ubicaciones de Dataform.

Cuotas

La administración de repositorios de Dataform en Dataplex está sujeta a las cuotas y límites de Dataplex.

Precios

La administración de repositorios de Dataform en Dataplex está sujeta a los precios de Dataplex.

¿Qué sigue?