Komponen Zeppelin opsional Dataproc

Anda dapat menginstal komponen tambahan seperti Zeppelin saat membuat cluster Dataproc menggunakan fitur Komponen opsional. Halaman ini menjelaskan komponen Zeppelin.

Komponen Notebook Zeppelin adalah notebook berbasis Web untuk analisis data interaktif. UI Web Zeppelin tersedia di port 8080 pada node master pertama cluster.

Secara default, notebook disimpan di Cloud Storage pada bucket staging Dataproc, yang ditentukan oleh pengguna atau dibuat secara otomatis saat cluster dibuat. Lokasi dapat diubah pada waktu pembuatan cluster melalui properti zeppelin:zeppelin.notebook.gcs.dir.

• Zeppelin dapat dikonfigurasi dengan memberikan properti cluster awalan zeppelin dan zeppelin-env.
  • Untuk mengurangi risiko eksekusi kode jarak jauh melalui API server notebook yang tidak aman, setelan properti cluster zeppelin:zeppelin.server.addr default untuk gambar versi 1.3+ adalah 127.0.0.1, yang membatasi koneksi ke localhost saat Gateway Komponen diaktifkan.

Menginstal komponen

Instal komponen saat Anda membuat cluster Dataproc. Komponen dapat ditambahkan ke cluster yang dibuat dengan Dataproc versi 1.3 dan yang lebih baru.

Lihat Versi Dataproc yang didukung untuk versi komponen yang disertakan dalam setiap rilis image Dataproc.

Perintah gcloud

Untuk membuat cluster Dataproc yang menyertakan komponen Zeppelin, gunakan perintah gcloud dataproc cluster create cluster-name dengan flag --optional-components.

Saat membuat cluster (image versi 1.3.29 atau yang lebih baru), gunakan perintah gcloud dataproc clusters create dengan flag --enable-component-gateway, seperti yang ditunjukkan di bawah, untuk memungkinkan koneksi ke UI Web notebook Zeppelin menggunakan Gateway Komponen.

gcloud dataproc clusters create cluster-name \
    --optional-components=ZEPPELIN \
    --region=region \
    --enable-component-gateway \
    ... other flags

REST API

Komponen Zeppelin dapat ditentukan melalui Dataproc API menggunakan SoftwareConfig.Component sebagai bagian dari permintaan clusters.create.

Dengan Dataproc v1 API, tetapkan properti EndpointConfig.enableHttpPortAccess ke true sebagai bagian dari permintaan Cluster.create untuk memungkinkan koneksi ke UI Web notebook Zeppelin menggunakan Gateway Komponen.

Konsol

1. Aktifkan gateway komponen dan komponen.
   • Di Konsol Google Cloud, buka halaman Buat cluster Dataproc. Panel Siapkan cluster dipilih.
   • Di bagian Components:
     • Di bagian Optional Components, pilih Zeppelin dan komponen opsional lainnya untuk diinstal di cluster Anda.
     • Pada Gateway Komponen, pilih Aktifkan gateway komponen (lihat Melihat dan Mengakses URL Gateway Komponen).

Buka notebook Zeppelin

Lihat Melihat dan Mengakses URL Gateway Komponen untuk mengklik link Gateway Komponen di Konsol Google Cloud guna membuka UI notebook Zeppelin yang berjalan di node master cluster di browser lokal Anda.