Dischi di avvio Dataproc

Seleziona Persistent Disk standard, SSD o bilanciato oppure Google Cloud Hyperdisk bilanciato come dischi di avvio per i nodi del cluster Dataproc.

Seleziona i tipi di disco di avvio permanente per i nodi del cluster

Puoi selezionare il tipo di disco di avvio permanente quando crei un cluster utilizzando la consoleGoogle Cloud , Google Cloud CLI o l'API Dataproc.

Console

Puoi creare un cluster e selezionare un disco di avvio Persistent Disk standard, SSD, bilanciato o Hyperdisk bilanciato per i nodi del cluster di gestione (master), worker primario e worker secondario dal riquadro Configura nodi nella pagina Crea un cluster della console Google Cloud .

Interfaccia a riga di comando gcloud

Puoi creare un cluster e selezionare un disco di avvio permanente standard, SSD o bilanciato oppure Hyperdisk bilanciato per i nodi del cluster di gestione (master), worker primario e worker secondario utilizzando il comando gcloud dataproc clusters create con i flag --master-boot-disk-type, --worker-boot-disk-type e --secondary-worker-boot-disk-type.

Il tipo di disco di avvio permanente predefinito per il gestore (master) del cluster Dataproc e i nodi worker primari è pd-standard. Se il tipo di macchina della VM supporta solo Hyperdisk bilanciato come disco di avvio, il disco di avvio predefinito è hyperdisk-balanced. Il tipo di disco di avvio permanente predefinito per i nodi worker secondari del cluster è il tipo di disco di avvio permanente del nodo worker primario.

Puoi trasmettere un valore di pd-standard, pd-ssd, pd-balanced o hyperdisk-balanced ai flag --master-boot-disk-type, --worker-boot-disk-type e --secondary-worker-boot-disk-type. È possibile impostare uno qualsiasi dei valori validi per il tipo di disco su qualsiasi tipo di nodo del cluster.

Esempio:
gcloud dataproc clusters create CLUSTER_NAME \
    --region=REGION \
    --master-boot-disk-type=pd-ssd \
    --worker-boot-disk-type=hyperdisk-balanced \
    --secondary-worker-boot-disk-type=pd-standard \
    other args ...
p

API REST

Il tipo di disco di avvio predefinito per il gestore (master) del cluster Dataproc e i nodi worker primari è pd-standard. Se il tipo di macchina della VM supporta solo Hyperdisk bilanciato come disco di avvio, il disco di avvio predefinito è hyperdisk-balanced. Il tipo di disco di avvio predefinito per i nodi worker secondari è il tipo di disco di avvio del nodo worker primario.

Puoi impostare un valore di pd-standard, pd-ssd, pd-balanced o hyperdisk-balanced nel campo InstanceGroupConfig.DiskConfig.bootDiskType in masterConfig, workerConfig e secondaryWorkerConfig nell'ambito di una richiesta API cluster.create. È possibile impostare uno qualsiasi dei valori validi del tipo di disco di avvio su qualsiasi tipo di nodo cluster.

Impostazioni di Hyperdisk

Quando crei un cluster con un volume Hyperdisk bilanciato come disco di avvio per un nodo del cluster Dataproc, puoi impostare IOPS e throughput sottoposti a provisioning.

Console

Hyperdisk bilanciato è selezionato come tipo di disco di avvio principale predefinito per i nodi del cluster di gestione (master) e di lavoro principale nel riquadro Configura nodi della pagina Crea un cluster di Dataproc della console Google Cloud . Puoi impostare IOPS e throughput o accettare i valori predefiniti.

Interfaccia a riga di comando gcloud

Puoi impostare IOPS sottoposte a provisioning e throughput sottoposto a provisioning per i nodi del cluster con i dischi di avvio hyperdisk-balanced utilizzando i flag gcloud dataproc clusters create --master-boot-disk-provisioned-iops, --worker-boot-disk-provisioned-iops, --master-boot-disk-provisioned-throughput e --worker-boot-disk-provisioned-throughput.

Esempio:
  gcloud dataproc clusters create CLUSTER_NAME \
      --region=REGION \
      --master-boot-disk-type=hyperdisk-balanced \
      --master-boot-disk-provisioned-iops=MASTER_BOOT_DISK_IOPS  \
      --master-boot-disk-provisioned-throughput=MASTER_BOOT_DISK_THROUGHPUT \
      --worker-boot-disk-type=hyperdisk-balanced \
      --worker-boot-disk-provisioned-iops=WORKER_BOOT_DISK_IOPS \
      --worker-boot-disk-provisioned-throughput=WORKER_BOOT_DISK_THROUGHPUT \
      other args ...
  

API REST

Puoi impostare IOPS sottoposte a provisioning e throughput sottoposto a provisioning per i nodi del cluster con dischi di avvio Hyperdisk utilizzando i campi InstanceGroupConfig.DiskConfig.bootDiskProvisionedIops e InstanceGroupConfig.DiskConfig.bootDiskProvisionedThroughput per le configurazioni di manager (master) e worker.