Workflows erstellen

Vorschau

Für dieses Produkt gelten die „Bedingungen für Pre-GA-Angebote“ im Abschnitt „Allgemeine Nutzungsbedingungen“ der dienstspezifischen Nutzungsbedingungen. Pre-GA-Produkte sind „wie besehen“ verfügbar und werden möglicherweise nur eingeschränkt unterstützt. Weitere Informationen finden Sie in den Beschreibungen der Startphase.

Wenn Sie Support benötigen oder Feedback zu dieser Funktion geben möchten, senden Sie eine E-Mail an [e-mail].

In diesem Dokument wird beschrieben, wie Sie Workflows in BigQuery erstellen. Workflows basieren auf Dataform.

Hinweise

1. Sign in to your Google Cloud account. If you're new to Google Cloud, create an account to evaluate how our products perform in real-world scenarios. New customers also get $300 in free credits to run, test, and deploy workloads.

2. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

   Note: If you don't plan to keep the resources that you create in this procedure, create a project instead of selecting an existing project. After you finish these steps, you can delete the project, removing all resources associated with the project.

   Go to project selector

3. Make sure that billing is enabled for your Google Cloud project.

4. Enable the BigQuery, Dataform, and Vertex AI APIs.

   Enable the APIs

5. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

   Note: If you don't plan to keep the resources that you create in this procedure, create a project instead of selecting an existing project. After you finish these steps, you can delete the project, removing all resources associated with the project.

   Go to project selector

6. Make sure that billing is enabled for your Google Cloud project.

7. Enable the BigQuery, Dataform, and Vertex AI APIs.

   Enable the APIs

8. Folgen Sie der Anleitung unter Code-Asset-Verwaltung aktivieren, um Versionen von Code-Assets wie Workflows zu speichern, freizugeben und zu verwalten.
9. Wenn Sie zum ersten Mal ein Code-Asset erstellen, legen Sie die Standardregion für die Speicherung von Code-Assets fest. Sie können die Region für ein Code-Asset nicht mehr ändern, nachdem es erstellt wurde.

Erforderliche Rollen

Bitten Sie Ihren Administrator, Ihnen die folgenden IAM-Rollen für das Projekt zuzuweisen, um die Berechtigungen zu erhalten, die Sie zum Erstellen von Workflows benötigen:

• So erstellen Sie Workflows: Code Creator (roles/dataform.codeCreator)
• So bearbeiten und führen Sie Workflows aus: Dataform-Bearbeiter (roles/dataform.editor)

Weitere Informationen zum Zuweisen von Rollen finden Sie unter Zugriff auf Projekte, Ordner und Organisationen verwalten.

Sie können die erforderlichen Berechtigungen auch über benutzerdefinierte Rollen oder andere vordefinierte Rollen erhalten.

Weitere Informationen zu Dataform IAM finden Sie unter Zugriffssteuerung mit IAM.

Hinweis: Wenn Sie einen Workflow erstellen, wird Ihnen in BigQuery die Rolle „Dataform Admin“ (roles/dataform.admin) speziell für diesen Workflow zugewiesen. Dadurch erhalten Sie Eigentümerzugriff, um das Dokument zu verwalten und zu bearbeiten. Alle Nutzer, die auf Google Cloud-Projektebene die Rolle „Dataform-Administrator“ haben, haben Inhaberzugriff auf alle Workflows innerhalb dieses Projekts.

Workflow erstellen

Führen Sie diese Schritte aus, um einen Workflow zu erstellen.

1. Rufen Sie die Seite BigQuery auf.

   BigQuery aufrufen

2. Klicken Sie in der Tableiste des Editorbereichs auf den Drop-down-Pfeil neben dem +-Zeichen und dann auf +.

3. Optional: Wenn Sie den Workflow umbenennen möchten, klicken Sie auf den Namen des Workflows und geben Sie dann einen neuen Namen ein.

4. Klicken Sie auf Jetzt starten und dann auf den Tab Einstellungen.

5. Wählen Sie im Feld Dienstkonto ein Dataform-Dienstkonto aus.

6. Wählen Sie im Abschnitt Speicherort eine Verarbeitungsregion für den Workflow aus.

   1. Wenn Sie eine bestimmte Region auswählen möchten, wählen Sie Region und dann im Drop-down-Menü Region eine Region aus.
   2. Wenn Sie einen multiregionalen Standort auswählen möchten, wählen Sie Mehrere Regionen und dann im Drop-down-Menü Mehrere Regionen einen Standort aus.

   Die Region für die Workflowverarbeitung muss nicht mit der Standardspeicherregion für Code-Assets übereinstimmen.

7. Wenn Sie Ihrem Workflow ein Notebook hinzufügen möchten, gehen Sie so vor:

   1. Klicken Sie im Feld Cloud Storage-Bucket auf Durchsuchen und wählen Sie einen Cloud Storage-Bucket zum Speichern der Ausgabe von Notebooks in Ihrem Workflow aus oder erstellen Sie einen.

   2. Folgen Sie der Anleitung unter Richtlinie auf Bucket-Ebene ein Hauptkonto hinzufügen, um Ihrem benutzerdefinierten Dataform-Dienstkonto ein Hauptkonto für den Cloud Storage-Bucket hinzuzufügen, den Sie zum Speichern der Ausgabe geplanter Workflowausführungen verwenden möchten, und diesem Hauptkonto die Rolle „Storage-Administrator“ (roles/storage.admin) zuzuweisen.

      Dem ausgewählten benutzerdefinierten Dataform-Dienstkonto muss die IAM-Rolle „Storage Admin“ für den ausgewählten Bucket zugewiesen sein.

Workflowaufgabe hinzufügen

So fügen Sie einem Workflow eine Aufgabe hinzu:

1. Öffnen Sie in der Google Cloud Console die Seite BigQuery.

   BigQuery aufrufen

2. Maximieren Sie im Bereich Explorer Ihr Projekt und den Ordner Workflows und wählen Sie dann einen Workflow aus.

3. So fügen Sie eine SQL-Abfrage oder ein Notebook hinzu:

   SQL-Abfrage

   1. Klicken Sie auf Aufgabe hinzufügen und wählen Sie Abfrage aus.

   2. Optional: Wählen Sie im Bereich Abfrageaufgaben – Details im Drop-down-Menü Nach eine Aufgabe aus, die vor Ihrer Abfrage ausgeführt werden soll.

      Ihre Anfrage hängt von der vorherigen Aufgabe ab.

   3. Klicken Sie auf Abfrage erstellen, um die Abfrage zu erstellen.

   4. Fügen Sie in der neuen Abfrage die Abfragesyntax hinzu und klicken Sie dann auf Abfrage speichern.

   5. Optional: Wenn Sie die Abfrage umbenennen möchten, klicken Sie auf den Namen der Abfrage und geben Sie einen neuen Namen ein.

   Notizbuch

   1. Klicken Sie auf Aufgabe hinzufügen und wählen Sie Notizbuch aus.

   2. Optional: Wählen Sie im Bereich Notebook-Aufgabendetails im Drop-down-Menü Nach eine Aufgabe aus, die vor dem Notebook ausgeführt werden soll.

      Ihr Notizbuch hängt von der vorherigen Aufgabe ab.

   3. Klicken Sie auf Notizbuch erstellen, um das Notizbuch zu erstellen.

   4. Fügen Sie dem neuen Notizbuch Notizen hinzu und klicken Sie dann auf Speichern.

   5. Optional: Wenn Sie das Notizbuch umbenennen möchten, klicken Sie auf den Namen des Notizbuchs und geben Sie einen neuen Namen ein.

Workflowaufgabe bearbeiten

So bearbeiten Sie eine Workflow-Aufgabe:

1. Öffnen Sie in der Google Cloud Console die Seite BigQuery.

   BigQuery aufrufen

2. Maximieren Sie im Bereich Explorer Ihr Projekt und den Ordner Workflows und wählen Sie dann einen Workflow aus.

3. Klicken Sie auf die ausgewählte Aufgabe.

4. Wenn Sie die vorherige Aufgabe ändern möchten, wählen Sie im Drop-down-Menü Nach eine Aufgabe aus, die vor dem Notebook ausgeführt werden soll.

5. Klicken Sie auf Bearbeiten, um den Inhalt der ausgewählten Aufgabe zu bearbeiten.

6. Bearbeiten Sie auf dem geöffneten neuen Tab den Aufgabeninhalt und speichern Sie die Änderungen an der Aufgabe.

Workflowaufgabe löschen

So löschen Sie eine Aufgabe aus einem Workflow:

1. Öffnen Sie in der Google Cloud Console die Seite BigQuery.

   BigQuery aufrufen

2. Maximieren Sie im Bereich Explorer Ihr Projekt und den Ordner Workflows und wählen Sie dann einen Workflow aus.

3. Klicken Sie auf die ausgewählte Aufgabe.

4. Klicken Sie im Bereich Aufgabendetails auf das Symbol LöschenLöschen.

Workflow ausführen

So führen Sie die aktuelle Version eines Workflows manuell aus:

1. Öffnen Sie in der Google Cloud Console die Seite BigQuery.

   BigQuery aufrufen

2. Maximieren Sie im Bereich Explorer Ihr Projekt und den Ordner Workflows und wählen Sie dann einen Workflow aus.

3. Klicken Sie auf Ausführen.

4. Optional: Wenn Sie die Ausführung prüfen möchten, rufen Sie die letzten manuellen Ausführungen auf.

Nächste Schritte

• Weitere Informationen zu Workflows in BigQuery
• Weitere Informationen zum Verwalten von Workflows