Datenvorbereitung verwalten
In diesem Dokument wird beschrieben, wie Sie Datenvorbereitungen in BigQuery verwalten, einschließlich der Bereitstellung und Planung von Datenvorbereitungen. Datenvorbereitungen sind BigQuery-Ressourcen, die auf Dataform basieren.
Hinweise
- Gemini in der BigQuery API muss aktiviert sein.
Erforderliche Rollen
Damit das Dataform-Dienstkonto die erforderlichen Berechtigungen zum Vorbereiten von Daten in BigQuery hat, lesen Sie den Hilfeartikel Erforderliche Rollen für Dataform-Dienstkonten.
Bitten Sie Ihren Administrator, Ihnen die folgenden IAM-Rollen für das Projekt zuzuweisen, um die Berechtigungen zu erhalten, die Sie zum Vorbereiten von Daten in BigQuery benötigen:
-
BigQuery Data Editor (
roles/bigquery.dataEditor
) -
Service Usage Consumer (
roles/serviceusage.serviceUsageConsumer
)
Weitere Informationen zum Zuweisen von Rollen finden Sie unter Zugriff auf Projekte, Ordner und Organisationen verwalten.
Sie können die erforderlichen Berechtigungen auch über benutzerdefinierte Rollen oder andere vordefinierte Rollen erhalten.
Vorhandene Datenvorbereitungen ansehen
So rufen Sie eine Liste der vorhandenen Datenvorbereitungen auf:
- Rufen Sie auf der Seite BigQuery Studio den Bereich Explorer auf.
- Erweitern Sie Ihr Projekt.
- Maximieren Sie die Liste Datenvorbereitung.
Datenvorbereitungen planen
Sie können Zeitpläne im Editor für die Datenvorbereitung erstellen und auf der BigQuery-Seite Orchestrierung verwalten.
Zeitplan erstellen
Wenn Sie einen Zeitplan erstellen möchten, mit dem die Schritte zur Datenvorbereitung ausgeführt und die vorbereiteten Daten in die Zieltabelle geladen werden, planen Sie einen einmaligen oder wiederkehrenden Lauf zur Datenvorbereitung:
- Klicken Sie in der Symbolleiste für die Datenvorbereitung auf Zeitplan.
- Geben Sie einen Namen für den Zeitplan ein.
- Geben Sie den Namen des Dienstkontos ein, das mit der Ausführung verknüpft ist.
- Legen Sie eine Häufigkeit fest.
- Klicken Sie auf Zeitplan erstellen.
Terminübersichten ansehen
So rufen Sie alle Zeitpläne für die Datenvorbereitung in Ihrem Projekt auf:
Rufen Sie in der Google Cloud Console die Seite Orchestrierung auf.
Optional: Klicken Sie auf den Namen des Zeitplans, um Details zu einem ausgewählten Zeitplan und seinen bisherigen Ausführungen aufzurufen.
Zeitplan löschen
So löschen Sie einen Zeitplan für eine ausgewählte Datenvorbereitung endgültig:
Rufen Sie in der Google Cloud Console die Seite Orchestrierung auf.
Klicken Sie in der Zeile mit dem Zeitplan auf > Löschen.
Aktionen
Datenvorbereitung durch inkrementelle Datenverarbeitung optimieren
So konfigurieren Sie, wie die vorbereiteten Daten in eine Zieltabelle geschrieben werden:
Öffnen Sie in der Google Cloud Console die Seite BigQuery Studio.
Wählen Sie im Bereich Aktivität die Datenvorbereitung aus.
Wählen Sie in der Symbolleiste der Datenvorbereitung Dreipunkt-Menü > Schreibmodus aus.
Wählen Sie eine der Optionen aus. Weitere Informationen finden Sie unter Schreibmodus.
Klicken Sie auf Speichern.
Vorschläge zur Verbesserung der Vorschläge
Sie können zur Verbesserung von Gemini-Vorschlägen beitragen, indem Sie die Prompt-Daten, die Sie für Funktionen in der Vorabversion einreichen, mit Google teilen. So geben Sie Ihre Prompt-Daten frei:
- Öffnen Sie den Editor für die Datenvorbereitung in BigQuery.
- Klicken Sie in der Symbolleiste für die Datenvorbereitung auf Einstellungen Dreipunkt-Menü.
- Wählen Sie Daten weitergeben, um Gemini in BigQuery zu verbessern aus.
Datenfreigabeeinstellungen gelten für das gesamte Projekt und können nur von einem Projektadministrator mit den IAM-Berechtigungen serviceusage.services.enable
und serviceusage.services.list
festgelegt werden. Weitere Informationen zur Datennutzung im Trusted Tester-Programm finden Sie unter Gemini im Google Cloud Trusted Tester-Programm.
Versionen der Datenvorbereitung
Bei der BigQuery-Datenvorbereitung ist es nicht möglich, Versionen der Datenvorbereitung aufzurufen, zu vergleichen oder wiederherzustellen.
So rufen Sie eine Liste der Versionen der Datenvorbereitung in chronologischer Reihenfolge auf:
- Rufen Sie auf der Seite BigQuery Studio den Bereich Explorer auf.
- Wählen Sie die Datenvorbereitung aus. Versionen werden im Bereich Explorer auf dem Tab Aktivität aufgeführt.
Datenvorbereitung herunterladen
So laden Sie eine Datenvorbereitung in einer YAML-Datei herunter:
Öffnen Sie in der Google Cloud Console die Seite BigQuery Studio.
Maximieren Sie im Bereich Explorer Ihr Projekt und den Ordner Datenvorbereitung. Klicken Sie auf den Namen der Datenvorbereitung, die Sie herunterladen möchten.
Klicken Sie auf Herunterladen. Die Datenvorbereitung wird im YAML-Dateiformat gespeichert, z. B.
NAME data preparation.dp.yaml
.
Datenvorbereitung hochladen
So laden Sie eine Datenvorbereitung aus einer YAML-Datei hoch:
Öffnen Sie in der Google Cloud Console die Seite BigQuery Studio.
Maximieren Sie im Bereich Explorer Ihr Projekt.
Gehen Sie zum Ordner Datenvorbereitungen und klicken Sie auf das more_vert > In die Datenvorbereitung hochladen.
Wählen Sie im Dialogfeld Datenvorbereitung hochladen eine Datei zum Hochladen aus oder geben Sie die URL der Datenvorbereitung ein.
Geben Sie einen Namen für die Datenvorbereitung ein.
Wählen Sie einen Speicherort für die Datenvorbereitung aus, an dem Ressourcen verwaltet und gespeichert werden.
Klicken Sie auf Hochladen.
Nächste Schritte
- Weitere Informationen zum Vorbereiten von Daten in BigQuery
- Weitere Informationen zum Erstellen von Datenvorbereitungen