Data Catalog mit BigQuery

In diesem Dokument finden Sie eine Übersicht über die Beziehung zwischen Data Catalog und BigQuery.

Data Catalog ist ein vollständig verwalteter, skalierbarer Dienst zur Metadatenverwaltung in Dataplex.

Anwendungsfälle für Data Catalog

BigQuery verwendet Data Catalog für die folgenden Anwendungsfälle:

  • Datenherkunft visualisieren
  • Nach Ressourcen suchen, auf die Sie Zugriff haben
  • Ressourcen mit Metadaten taggen

Eine ausführlichere Beschreibung von Data Catalog finden Sie unter Was ist Data Catalog?

So funktioniert Data Catalog

Data Catalog kann Metadaten aus BigQuery-Datenquellen katalogisieren. Nach der Katalogisierung Ihrer Metadaten können Sie diesen Datenquellen mithilfe von Tags eigene Metadaten hinzufügen. Für ein bestimmtes BigQuery-Projekt katalogisiert Data Catalog automatisch BigQuery-Metadaten zu Datasets, Tabellen, Ansichten und Modellen. Data Catalog verarbeitet zwei Arten von Metadaten: technische Metadaten und Geschäftsmetadaten. Weitere Informationen zu Metadaten finden Sie unter Data Catalog-Metadaten.

Daten suchen und ermitteln

Data Catalog bietet eine leistungsfähige prädikatbasierte Suche für technische und geschäftliche Metadaten, die einem Data Catalog-Eintrag zugeordnet ist, der eine BigQuery-Datenquelle darstellt. Sie müssen die Berechtigungen zum Lesen der Metadaten für eine Ressource haben, damit Sie die Metadaten suchen und finden können. Data Catalog indiziert die Daten innerhalb einer Ressource nicht. Data Catalog indiziert nur die Metadaten, die eine BigQuery-Datenquelle beschreiben.

Data Catalog steuert einige Metadaten, z. B. nutzergenerierte Tags. Für alle Metadaten aus BigQuery ist Data Catalog ein schreibgeschützter Dienst, der die Metadaten und Berechtigungen von BigQuery widerspiegelt. Sie können in BigQuery Änderungen vornehmen, um die Metadaten eines Dateneintrags hinzuzufügen, zu aktualisieren oder zu löschen.

Weitere Informationen zur Data Catalog-Suche finden Sie unter Nach BigQuery-Ressourcen suchen.

Auf Data Catalog zugreifen

Sie können über die folgenden Oberflächen auf die Funktionen von Data Catalog zugreifen:

Nächste Schritte