Dataproc 可选 Zeppelin 组件

使用可选组件功能创建 Dataproc 集群时，您可以安装 Zeppelin 等其他组件。本页面介绍了 Zeppelin 组件。

Zeppelin 笔记本组件是一个基于网页的笔记本，用于交互式数据分析。您可以通过集群的第一个主节点上的 8080 端口访问 Zeppelin Web 界面。

默认情况下，笔记本保存在 Cloud Storage 的 Dataproc 暂存存储桶中，该存储桶由用户指定或在创建集群时自动创建。您可以在创建集群时通过 zeppelin:zeppelin.notebook.gcs.dir 属性更改该位置。

• 您可以通过提供带有 zeppelin 和 zeppelin-env 前缀的集群属性来配置 Zeppelin。
  • 为了降低通过不安全的笔记本服务器 API 执行远程代码的风险，zeppelin:zeppelin.server.addr 映像版本 1.3+ 的集群属性设置现为 127.0.0.1，当启用组件网关时，该设置将连接限制为 localhost。

安装组件

在创建 Dataproc 集群时安装组件。 组件可添加到使用 Dataproc 版本 1.3 及更高版本创建的 集群中。

如需查看每个 Dataproc 映像版本中包含的组件版本，请参阅支持的 Dataproc 版本。

gcloud 命令

如需创建包含 Zeppelin 组件的 Dataproc 集群，请使用带有 --optional-components 标志的 gcloud dataproc clusters create cluster-name 命令。

创建集群（映像版本 1.3.29 或更高版本）时，使用带有 --enable-component-gateway 标志的 gcloud dataproc clusters create 命令（如下所示），以使用组件网关连接到 Zeppelin 笔记本网页界面。

gcloud dataproc clusters create cluster-name \
    --optional-components=ZEPPELIN \
    --region=region \
    --enable-component-gateway \
    ... other flags

REST API

可以通过 Dataproc API 使用 SoftwareConfig.Component 将 Zeppelin 组件指定为 clusters.create 请求的一部分。

使用 Dataproc v1 API，将 EndpointConfig.enableHttpPortAccess 属性设置为 true（作为 clusters.create 请求的一部分），将其连接到使用组件网关的 Zeppelin 笔记本网页界面。

控制台

1. 启用组件和组件网关。
   • 在 Google Cloud 控制台中，打开 Dataproc 的创建集群页面。选中“设置集群”面板。
   • 在组件部分中执行以下操作：
     • 在可选组件下，选择 Zeppelin 和其他可选组件安装在集群上。
     • 在“组件网关”下，选择“启用组件网关”（请参阅查看和访问组件网关网址）。

打开 Zeppelin 笔记本

请参阅查看和访问组件网关网址，点击 Google Cloud 控制台上的组件网关链接，以在本地浏览器中打开集群的主节点上运行的 Zeppelin 笔记本界面。