Dataproc-Cluster mithilfe einer Vorlage erstellen

Dataproc-Cluster mithilfe einer Vorlage erstellen

Auf dieser Seite wird beschrieben, wie Sie eine Inline-Vorlage von Google APIs Explorer verwenden, um die Dataproc API zum Erstellen eines Dataproc-Clusters aufzurufen.

Weitere Möglichkeiten zum Erstellen eines Clusters finden Sie unter:

• Dataproc-Cluster mit der Google Cloud Console erstellen
• Dataproc-Cluster mit der Google Cloud CLI erstellen
• Dataproc-Cluster mithilfe von Clientbibliotheken erstellen

Hinweise

1. Melden Sie sich bei Ihrem Google Cloud-Konto an. Wenn Sie mit Google Cloud noch nicht vertraut sind, erstellen Sie ein Konto, um die Leistungsfähigkeit unserer Produkte in der Praxis sehen und bewerten zu können. Neukunden erhalten außerdem ein Guthaben von 300 $, um Arbeitslasten auszuführen, zu testen und bereitzustellen.

2. Wählen Sie in der Google Cloud Console auf der Seite der Projektauswahl ein Google Cloud-Projekt aus oder erstellen Sie eines.

   Hinweis: Wenn Sie die Ressourcen, die Sie in diesem Verfahren erstellen, nicht behalten möchten, erstellen Sie ein Projekt, anstatt ein vorhandenes Projekt auszuwählen. Wenn Sie fertig sind, können Sie das Projekt löschen und dadurch alle mit dem Projekt verknüpften Ressourcen entfernen.

   Zur Projektauswahl

3. Die Abrechnung für das Google Cloud-Projekt muss aktiviert sein.

4. Dataproc API aktivieren.

   Aktivieren Sie die API

5. Wählen Sie in der Google Cloud Console auf der Seite der Projektauswahl ein Google Cloud-Projekt aus oder erstellen Sie eines.

   Hinweis: Wenn Sie die Ressourcen, die Sie in diesem Verfahren erstellen, nicht behalten möchten, erstellen Sie ein Projekt, anstatt ein vorhandenes Projekt auszuwählen. Wenn Sie fertig sind, können Sie das Projekt löschen und dadurch alle mit dem Projekt verknüpften Ressourcen entfernen.

   Zur Projektauswahl

6. Die Abrechnung für das Google Cloud-Projekt muss aktiviert sein.

7. Dataproc API aktivieren.

   Aktivieren Sie die API

Cluster erstellen

Um Dataproc-Jobs ausführen zu können, müssen Sie einen Cluster virtueller Maschinen erstellen, auf denen die Jobs ausgeführt werden. Zum Erstellen eines Dataproc-Clusters in Ihrem Projekt müssen Sie die Vorlage Google APIs Explorer testen ausfüllen und ausführen.

Hinweis: Die Parameterwerte region und clusterName werden für Sie ausgefüllt. Akzeptieren oder ersetzen Sie diese „seeded”-Parameterwerte.

1. Anfrageparameter:

   1. Geben Sie die projectId ein.
   2. Geben Sie die Region an, in der sich Ihr Cluster befinden wird (akzeptieren oder ersetzen Sie „us-central1”). Da Sie in dieser Kurzanleitung keine Zone innerhalb der Region angeben, wählt die Automatische Zonenplatzierung in Dataproc eine Zone innerhalb der Region aus, in der sie den Cluster erstellt.

2. Anfragetext:

   1. Geben Sie einen clusterName an (akzeptieren oder ersetzen Sie „example-cluster”). Dieser Name dient zur Interaktion mit dem Cluster, z. B. wenn Sie Jobs senden oder den Cluster aktualisieren.

3. Klicken Sie auf AUSFÜHREN. Wenn Sie die API-Vorlage zum ersten Mal ausführen, werden Sie möglicherweise aufgefordert, ein Google-Konto auszuwählen und sich anzumelden, und autorisieren Sie dann Google APIs Explorer, auf Ihr Konto zuzugreifen. Wenn die Anfrage erfolgreich ist, zeigt die JSON-Antwort an, dass die Clustererstellung aussteht.

4. Öffnen Sie in der Google Cloud Console die Seite Dataproc-Cluster, um die Clustererstellung zu bestätigen. Nach Abschluss der Clusterbereitstellung wird der Status des Clusters als „Wird ausgeführt” angezeigt.

Bereinigen

Mit den folgenden Schritten vermeiden Sie, dass Ihrem Google Cloud-Konto die auf dieser Seite verwendeten Ressourcen in Rechnung gestellt werden.

1. Wenn Sie den Cluster nicht benötigen, um sich die anderen Kurzanleitungen anzusehen oder andere Jobs auszuführen, verwenden Sie den APIs Explorer, die Google Cloud Console, das gcloud der gcloud CLI oder die Cloud-Clientbibliotheken, um den Cluster zu löschen.

Nächste Schritte

• Spark-Job mithilfe einer Vorlage senden