Dataproc 永久性固态硬盘(PD-SSD)启动磁盘

借助此功能,您可以选择永久性磁盘固态硬盘 (PD-SSD) 作为集群主实例和/或主工作器节点和/或辅助(抢占式)工作器节点的启动磁盘。

使用 PD-SSD

gcloud 命令

您可以使用带有 --master-boot-disk-type 和/或 --worker-boot-disk-type 和/或 --secondary-worker-boot-disk-type 标志的 gcloud dataproc clusters create 命令,创建集群并选择 PD-SSD 或 PD 平衡作为集群主实例和/或主工作器节点和/或辅助工作器节点的启动磁盘。

每个标志的默认值都是“pd-standard”,表示选择 PD-Standard(普通硬盘)作为启动磁盘。如需选择 PD-SSD 或 PD 平衡作为启动磁盘,请将值“pd-ssd”或“pd-balance”分别传递到 --master-boot-disk-type 和/或 --worker-boot-disk-type 和/或 --secondary-worker-boot-disk-type 标志。这些标志可以独立使用或组合使用,以便选择 PD-SSD 或 PD 平衡作为主实例和/或主工作器节点和/或辅助工作器节点的启动磁盘。

例如:
gcloud dataproc clusters create cluster-name \
    --region=region \
    --master-boot-disk-type=pd-ssd \
    --worker-boot-disk-type=pd-ssd \
    --secondary-worker-boot-disk-type=pd-ssd \
    other args ...

REST API

您可以通过在 cluster.create API 请求 masterConfig 和/或 workerConfig 和/或 secondaryWorkerConfig InstanceGroupConfig 对象中,将 bootDiskType 字段设为“pd-ssd”或“pd-balanced”,以创建集群并选择 PD-SSD 或 PD 平衡作为集群的主实例和/或主工作器节点和/或辅助(抢占式)工作器节点的启动磁盘。如果未指定,则默认 bootDiskType 是“pd-standard”,表示选择 PD-Standard(普通硬盘)作为启动磁盘。您可以单独设置每个配置,以便选择 pd-ssdpd-balanced 作为主实例和/或主工作器节点和/或辅助(抢占式)工作器节点的启动磁盘类型。

控制台

您可以创建集群,并从 Google Cloud 控制台的 Dataproc 创建集群页面的“配置节点”面板中选择 PD-SSD 作为主实例、主工作器和辅助节点的启动磁盘(并选择每个节点的启动磁盘大小)。