Ao criar um serviço do metastore do Dataproc, é possível usar um serviço do metastore do Dataproc 2 ou um serviço do metastore do Dataproc 1.
Neste documento, explicamos como controlar o consumo de recursos do metastore do Dataproc 2.
Fatores de escalonamento e edições
O metastore do Dataproc 2 usa fatores de escalonamento e edições (cargas de trabalho) para lidar com diferentes níveis de estabilidade e cargas de trabalho. Você seleciona o fator de escalonamento e a edição ao criar um serviço Metastore do Dataproc.
Depois de criar o serviço do metastore do Dataproc, é possível aumentar ou diminuir a escala dele modificando o fator de escalonamento. Os fatores de escalonamento variam de small
a XLarge
e são representados por um número que varia de 0.1
a 6.0
.
Para mais informações sobre edições e fatores de escalonamento, consulte Fatores de escalonamento e cargas de trabalho.
Escalonamento automático
O metastore do Dataproc 2 também é compatível com o escalonamento automático. Se você ativar o escalonamento automático, defina um fator mínimo e um máximo. Depois que esses parâmetros são definidos, seu serviço aumenta ou diminui automaticamente o consumo de recursos para executar cargas de trabalho. O escalonamento automático está disponível apenas para instâncias do metastore do Dataproc de região única.
Para mais informações sobre como configurar o escalonamento automático, consulte Criar um serviço de escalonamento automático.
Regiões com restrição de recursos
O metastore do Dataproc está presente em várias regiões que têm menos recursos disponíveis do que outras. Essas regiões restringem o fator máximo de escalonamento a 1
e não oferecem suporte ao escalonamento automático. As regiões a seguir são consideradas regiões com restrição de recursos pelo metastore do Dataproc:
australia-southeast2
europe-southwest1
europe-west8
europe-west9
europe-west12
southamerica-west1
us-east5
us-south1
me-central1
me-central2
me-west1