Entre el 15 de octubre de 2024 y el 15 de noviembre de 2024, cambiarán algunos de los metadatos de BigQuery que se almacenan en Dataplex Catalog.
Este cambio incorpora los metadatos almacenados Dataplex Catalog en coherencia con BigQuery y metadatos de otras fuentes de Google Cloud.
Si tienes cargas de trabajo que dependen de los metadatos de BigQuery, debes ajustarlas para preservar la continuidad.
Para obtener más información sobre los metadatos de Dataplex Catalog, consulta Descripción general de Dataplex Catalog.
Alcance de los cambios
Los cambios que se describen en esta sección se aplican a todas las entradas de BigQuery. Las entradas de BigQuery son entradas que pertenecen a un tipo de entrada en el sistema de BigQuery.
Los siguientes métodos de API se ven afectados por estos cambios:
Los cambios en los valores de tipo de datos y de subtipo de tabla también se reflejan en la consola de Google Cloud, en la página Detalles de la entrada.
Valores de tipos de datos
Los valores del tipo de datos cambian para el tipo de aspecto SchemaAspect
. Se ve afectado el campo dataType
.
Valor anterior al cambio | Valor después del cambio |
---|---|
INT64 |
INTEGER |
FLOAT64 |
FLOAT |
STRUCT |
RECORD |
BOOL |
BOOLEAN |
Nombres de recursos
El nombre del recurso cambiará para el campo de entrada de nivel superior entrySource.resource
. El campo se modifica para contener el ID del recurso en lugar del nombre completo del recurso.
Valor anterior al cambio | Valor después del cambio |
---|---|
//bigquery.googleapis.com/projects/PROJECT_ID/datasets/DATASET/tables/TABLE |
projects/PROJECT_ID/datasets/DATASET/tables/TABLE |
Valores de tipo de ancestro
El valor del tipo de principal cambiará para el campo de entrada de nivel superior
entrySource.ancestors.type
Valor antes del cambio | Valor después del cambio |
---|---|
655216118709.global.Dataset |
dataplex-types.global.bigquery-dataset |
Qué debe hacer
El período de lanzamiento comienza el 15 de octubre de 2024 y finaliza el 15 de noviembre de 2024. El los cambios en los metadatos de BigQuery se aplicarán gradualmente durante el período de lanzamiento.
Sigue estos pasos:
- Antes del 15 de octubre de 2024: actualiza tus cargas de trabajo para que interpreten ambas de metadatos y la versión actualizada de los metadatos.
Durante el período de lanzamiento: las entradas de BigQuery pueden capturar la la versión heredada de los metadatos o la versión actualizada de los metadatos. Tus cargas de trabajo debería poder interpretar ambas versiones.
Para determinar si una entrada de BigQuery usa los metadatos actualizados, sigue estos pasos: En el objeto
aspects
de la entrada, ubica el tipo de aspecto relevante. En el objetoaspectSource
del tipo de aspecto, el campodata_version
indica la versión de los metadatos. Por ejemplo, para una entradabigquery-table
, consulta el campoEntry.aspects.dataplex-types.global.bigquery-table.aspectSource.data_version
Usa la versión de metadatos heredados Usa la versión actualizada de los metadatos ""
(string vacía)"Ingestion/1.0.0"
Después del 15 de noviembre de 2024: De manera opcional, actualiza tus cargas de trabajo para que interpreten solo la nueva versión de metadatos.
Asistencia
Si tienes preguntas, comunícate con dataplex-msa-support@google.com.