Dataplex Universal Catalog evolucionó a Knowledge Catalog. Los SKUs de precios seguirán llamándose Dataplex. Los precios de Dataplex se basan en el uso de pago por uso. Actualmente, Dataplex cobra en función de los siguientes SKUs:

• Procesamiento de Dataplex Universal Catalog (estándar y premium)
• Almacenamiento de metadatos

A continuación, se presenta una descripción general de alto nivel de cómo se facturan las principales capacidades de Dataplex Universal Catalog:

El procesamiento estándar y premium de Dataplex Universal Catalog se mide por unidad de procesamiento de datos (DCU). La hora de DCU es una unidad de facturación abstracta para Dataplex Universal Catalog, y la medición real depende de las funciones individuales que uses.

Nivel gratuito de Dataplex Universal Catalog para Knowledge Catalog

Como parte del nivel gratuito de Google Cloud, Knowledge Catalog ofrece algunos recursos sin costo hasta un límite específico. Estos límites de uso gratuito están disponibles durante el período de prueba y después de este. Si excedes los límites de uso una vez finalizado el período de prueba gratuita, se aplicarán cargos conforme a los precios que se indican en las secciones anteriores.

Nota: El nivel gratuito de Knowledge Catalog solo está disponible para el SKU de procesamiento estándar de Dataplex Universal Catalog y no para el SKU de procesamiento premium de Dataplex Universal Catalog.

Los cargos de DCU para cada función se calculan de la siguiente manera:

1. Análisis de calidad automática de los datos:

• El consumo de DCU por hora es proporcional al procesamiento involucrado en la creación de perfiles de datos y el cálculo de las métricas de calidad de los datos. Se factura por segundo, con un mínimo de un minuto.
• El cargo depende de la cantidad de filas, la cantidad de columnas, la cantidad de datos que analizaste, la configuración de la regla de calidad de los datos, la configuración de partición y agrupamiento en clústeres de la tabla y la frecuencia del análisis.
• Para los análisis de detección de anomalías de calidad de los datos, no se aplican cargos de DCU. En cambio, se aplican los precios estándar de BigQuery para el procesamiento, el almacenamiento y el entrenamiento, el procesamiento y la implementación de modelos de BQML.
• Usar una identidad de ejecución personalizada cambia la forma en que se te factura el análisis. Cuando especificas una identidad de ejecución personalizada, los costos de procesamiento y almacenamiento asociados con el análisis se facturan directamente a tu proyecto de BigQuery, lo que omite los SKUs estándar de Dataplex Premium.

2. Existen varias opciones para reducir el costo de los análisis automáticos de calidad de los datos:

• Muestreo
• Análisis incrementales
• Para separar los cargos de calidad de los datos de otros cargos en el SKU de procesamiento premium de Dataplex, en el informe de Cloud Billing, usa la etiqueta goog-dataplex-workload-type con el valor DATA_QUALITY.

3. Para filtrar los cargos agregados, usa las siguientes etiquetas disponibles en la exportación de facturación en BigQuery:

• goog-dataplex-datascan-data-source-dataplex-entity
• goog-dataplex-datascan-data-source-dataplex-lake
• goog-dataplex-datascan-data-source-dataplex-zone
• goog-dataplex-datascan-data-source-project
• goog-dataplex-datascan-data-source-region
• goog-dataplex-datascan-id
• goog-dataplex-datascan-job-id

4. Análisis de creación de perfiles de datos:

• El consumo de DCU por hora es proporcional al procesamiento involucrado en la creación de perfiles de datos y el cálculo de las métricas de calidad de los datos. Se factura por segundo, con un mínimo de un minuto.
• El cargo depende de la cantidad de filas y columnas, la cantidad de datos analizados, la configuración de partición y agrupamiento en clústeres de la tabla, y la frecuencia del análisis.
• Usar una identidad de ejecución personalizada cambia la forma en que se te factura el análisis. Cuando especificas una identidad de ejecución personalizada, los costos de procesamiento y almacenamiento asociados con el análisis se facturan directamente a tu proyecto de BigQuery, lo que omite los SKUs estándar de Dataplex Premium.

5. Existen varias opciones para reducir el costo de los análisis de creación de perfiles de datos:

• Muestreo
• Análisis incrementales
• Filtrado de columnas
• Filtrado de filas
• Para separar los cargos de creación de perfiles de datos de otros cargos en el SKU de procesamiento premium de Dataplex, en el informe de Facturación de Cloud, usa la etiqueta goog-dataplex-workload-type con el valor DATA_PROFILE.

6. Para filtrar los cargos agregados, usa las siguientes etiquetas disponibles en la exportación de facturación en BigQuery:

• goog-dataplex-datascan-data-source-dataplex-entity
• goog-dataplex-datascan-data-source-dataplex-lake
• goog-dataplex-datascan-data-source-dataplex-zone
• goog-dataplex-datascan-data-source-project
• goog-dataplex-datascan-data-source-region
• goog-dataplex-datascan-id
• goog-dataplex-datascan-job-id

7. Linaje de datos:

• El consumo de horas de DCU es proporcional al procesamiento necesario para analizar automáticamente el linaje.
• Para separar los cargos de linaje de datos de otros cargos en el SKU de procesamiento premium de Dataplex, en el informe de Facturación de Cloud, usa la etiqueta goog-dataplex-workload-type con el valor LINEAGE.
• Si llamas a la API de Data Lineage Origin sourceType con un valor que no sea CUSTOM, se generarán costos adicionales.

Ejemplo de precios de linaje de datos

El usuario A habilita el linaje de datos para hacer un seguimiento del linaje de BigQuery en su proyecto. El proyecto está en la ubicación us-central1. Durante un mes, el linaje de datos consume 100 horas de DCU de procesamiento Premium de Dataplex y genera 1 GiB de metadatos de linaje de datos. El costo es:

A medida que los usuarios interactúan con Knowledge Catalog, las llamadas a la API son gratuitas, lo que incluye lo siguiente:

• Creación y administración de recursos de Dataplex Universal Catalog
• Crea y administra recursos de linaje
• Búsqueda en el catálogo

En esta sección, se proporcionan ejemplos de cómo calcular el costo de Dataplex Universal Catalog.

Aspectos pequeños

• El usuario A crea y aplica aspectos pequeños (1,024 bytes cada uno). Por $10 al mes, el usuario puede almacenar 5 GiB de metadatos, lo que corresponde aproximadamente a 5 M de aspectos. Si se supone que hay un aspecto por tabla, esto equivale a un total de 5 millones de tablas con aspectos.
• El usuario B crea 5 millones de aspectos de 1 KB cada uno el día 10 del mes y los borra el día 20. El costo es de $3.33, calculado como 5 GiB de datos divididos por un tercio de un mes:

Aspectos importantes

• El usuario C crea y aplica aspectos grandes (10 KB cada uno). Por $10 al mes, el usuario puede almacenar 5 GiB de metadatos, lo que corresponde a aproximadamente 500,000 aspectos. Si se supone que hay un aspecto por tabla, esto equivale a un total de 500,000 tablas con aspectos.
• El usuario D crea 10,000 tipos de aspectos (por ejemplo, ETL, administración de datos, calidad de los datos) y aplica aspectos grandes (10 KB cada uno) con cada uno de los 10 tipos de aspectos. Por $10 al mes, el usuario puede almacenar 5 GiB de metadatos, lo que corresponde aproximadamente a 500,000 aspectos. Si se asumen 10 aspectos por tabla, esto equivale a un total de 50,000 tablas con aspectos.

En esta sección, se describen los precios de Data Catalog, que se encuentra en la fase de obsolescencia (transición a Dataplex Universal Catalog para evitar la interrupción del servicio).

Se aplican cargos de Data Catalog al almacenamiento de metadatos para Data Catalog y a las llamadas a la API de Data Catalog.

Los cargos por almacenamiento de metadatos y llamadas a la API se aplican por día. Puedes ver el uso no facturado en la consola de Google Cloud.

Nota: Los modelos de precios se aplican a las cuentas, no a los proyectos, a menos que se especifique lo contrario.

Las llamadas a la API de Data Catalog se facturan como se describe en la siguiente tabla:

Nota: Las búsquedas realizadas en la página de Data Catalog en la consola de Google Cloud se ofrecen sin cargo.