Übersicht über Data Catalog mit BigQuery
Dieses Dokument bietet einen Überblick über die Beziehung zwischen Data Catalog und BigQuery.
Data Catalog ist ein vollständig verwalteter, skalierbarer Dienst zur Metadatenverwaltung in Dataplex.
Anwendungsfälle für Data Catalog
BigQuery verwendet Data Catalog für die folgenden Anwendungsfälle:
- Datenherkunft visualisieren
- Nach Ressourcen suchen, auf die Sie Zugriff haben
- Ressourcen mit Metadaten taggen
Eine ausführlichere Beschreibung von Data Catalog finden Sie unter Was ist Data Catalog?
So funktioniert Data Catalog
Data Catalog kann Metadaten aus BigQuery-Datenquellen katalogisieren. Nach der Katalogisierung Ihrer Metadaten können Sie diesen Datenquellen mithilfe von Tags eigene Metadaten hinzufügen. Für ein bestimmtes BigQuery-Projekt katalogisiert Data Catalog automatisch BigQuery-Metadaten zu Datasets, Tabellen, Ansichten und Modellen. Data Catalog verarbeitet zwei Arten von Metadaten: technische Metadaten und Geschäftsmetadaten. Weitere Informationen zu Metadaten finden Sie unter Data Catalog-Metadaten.
Daten suchen und ermitteln
Data Catalog bietet eine leistungsfähige prädikatbasierte Suche für technische und geschäftliche Metadaten, die einem Data Catalog-Eintrag zugeordnet ist, der eine BigQuery-Datenquelle darstellt. Sie benötigen die Berechtigungen zum Lesen der Metadaten für eine Ressource, damit Sie Suche und Erkennung auf die Metadaten anwenden können. Data Catalog indiziert die Daten innerhalb einer Ressource nicht. Data Catalog indiziert nur die Metadaten, die eine BigQuery-Datenquelle beschreiben.
Data Catalog steuert einige Metadaten, z. B. nutzergenerierte Tags. Für alle Metadaten aus BigQuery ist Data Catalog ein schreibgeschützter Dienst, der die von BigQuery bereitgestellten Metadaten und Berechtigungen widerspiegelt. Sie können Änderungen in BigQuery vornehmen, um die Metadaten eines Dateneintrags hinzuzufügen, zu aktualisieren oder zu löschen.
Weitere Informationen zur Data Catalog-suche finden Sie unter Nach BigQuery-Ressourcen suchen.
Auf Data Catalog zugreifen
Sie können über die folgenden Schnittstellen auf die Data Catalog-Funktionen zugreifen:
Die Seite BigQuery in der Google Cloud Console
Die Seite Dataplex in der Google Cloud Console
Die Google Cloud CLI
Nächste Schritte
- Informationen zum Einstieg in Data Catalog und BigQuery finden Sie unter Mit Data Catalog arbeiten.