Perubahan pada metadata BigQuery yang disimpan di Katalog Dataplex

Antara 15 Oktober 2024 dan 31 Januari 2025, beberapa metadata BigQuery yang disimpan di Katalog Dataplex akan berubah.

Perubahan ini membuat metadata yang disimpan di Katalog Dataplex menjadi konsisten dengan metadata BigQuery dan metadata dari sumber Google Cloud lainnya.

Jika memiliki beban kerja yang bergantung pada metadata BigQuery, Anda harus menyesuaikannya untuk mempertahankan kontinuitas.

Untuk mengetahui informasi selengkapnya tentang metadata Katalog Dataplex, lihat Ringkasan Katalog Dataplex.

Cakupan perubahan

Perubahan yang dijelaskan di bagian ini berlaku untuk semua entri BigQuery. Entri BigQuery adalah entri yang termasuk dalam jenis entri dalam sistem BigQuery.

Metode API berikut terpengaruh oleh perubahan ini:

Perubahan pada nilai jenis data dan nilai subjenis tabel juga diterapkan di konsol Google Cloud, di halaman Entry Details.

Nilai jenis data

Nilai jenis data berubah untuk jenis aspek SchemaAspect. Kolom dataType terpengaruh.

Nilai sebelum perubahan Nilai setelah perubahan
INT64 INTEGER
FLOAT64 FLOAT
STRUCT RECORD
BOOL BOOLEAN

Nama resource

Nama resource berubah untuk kolom entri tingkat atas entrySource.resource. Kolom diubah untuk berisi ID resource, bukan nama resource lengkap.

Nilai sebelum perubahan Nilai setelah perubahan
//bigquery.googleapis.com/projects/PROJECT_ID/datasets/DATASET/tables/TABLE projects/PROJECT_ID/datasets/DATASET/tables/TABLE

Nilai jenis ancestor

Nilai jenis ancestor berubah untuk kolom entri tingkat atas entrySource.ancestors.type.

Nilai sebelum perubahan Nilai setelah perubahan
655216118709.global.Dataset dataplex-types.global.bigquery-dataset

Yang perlu dilakukan

Periode peluncuran dimulai pada 15 Oktober 2024, dan berakhir pada 31 Januari 2025. Perubahan pada metadata BigQuery akan diterapkan secara bertahap selama periode peluncuran.

Berikut hal-hal yang perlu Anda lakukan:

  • Sebelum 15 Oktober 2024: perbarui beban kerja Anda untuk menafsirkan metadata versi lama dan metadata versi yang diperbarui.

  • Selama periode peluncuran: Entri BigQuery mungkin mengambil metadata versi lama atau metadata versi yang diperbarui. Workload Anda harus dapat menafsirkan kedua versi tersebut.

    Untuk menentukan apakah entri BigQuery menggunakan metadata yang diperbarui, di objek aspects entri, temukan jenis aspek yang relevan. Dalam objek aspectSource jenis aspek, kolom data_version menunjukkan versi metadata. Misalnya, untuk entri bigquery-table, lihat kolom Entry.aspects.dataplex-types.global.bigquery-table.aspectSource.data_version.

    Menggunakan versi metadata lama Menggunakan versi metadata yang diperbarui
    "" (string kosong) "Ingestion/1.0.0"

  • Setelah 31 Januari 2025: secara opsional, perbarui beban kerja Anda untuk hanya menafsirkan metadata versi baru.

Dukungan

Untuk pertanyaan, hubungi dataplex-msa-support@google.com.