As secções seguintes explicam as quotas e os limites do Dataproc Metastore. Para alterar uma quota, peça quota adicional através da Google Cloud consola. Geralmente, não é possível aumentar os limites, exceto se for especificamente indicado.
Quotas e limites
Serviços do Dataproc Metastore
Item | Quotas e limites | Notas |
---|---|---|
Serviços por região única | 20 serviços | Quando um projeto viola a política de serviços, a respetiva quota de serviços por região é significativamente reduzida. Google Cloud |
Serviços por multirregião | 5 serviços | Quando um projeto viola a política de serviços, a respetiva quota de serviços por região é significativamente reduzida. Google Cloud |
Armazenamento de metadados para serviços do Dataproc Metastore
Item | Quotas e limites | Notas |
---|---|---|
Armazenamento de metadados por serviço de nível Developer |
10 GB | |
Armazenamento de metadados por serviço de nível Enterprise |
1 TB |
Consultas por segundo para projetos do Dataproc Metastore
Item | Quotas e limites | Notas |
---|---|---|
Consultas por segundo (CPS) por projeto | 20 CPS | |
Consultas por segundo (CPS) por projeto por utilizador | 5 CPS | |
Consultas de manutenção por segundo (CPS) por projeto | 20 CPS | Os seguintes pedidos do Hive Metastore consomem esta quota:
createTable createDatabase deleteTable deleteDatabase |
Limite de tempo limite da tarefa para o Dataproc Metastore
Item | Quotas e limites | Notas |
---|---|---|
Limite de tempo limite da tarefa para exportação/cópia de segurança/restauro | 1 hora | |
Limite de tempo limite da tarefa para importação | 3 horas |
Gestão de quotas
O Metastore do Dataproc aplica quotas à utilização de recursos por vários motivos. Por exemplo, as quotas protegem a comunidade de utilizadores impedindo picos inesperados na utilização. Google CloudAs quotas também ajudam os utilizadores que estão a explorar Google Cloud com o nível gratuito a manterem-se dentro da avaliação.
Todos os projetos começam com as mesmas quotas, que pode alterar pedindo quota adicional. Algumas cotas podem aumentar automaticamente com base na sua utilização de um produto.
Autorizações
Para ver quotas ou pedir aumentos de quotas, os principais da gestão de identidade e de acesso (IAM) precisam de uma das seguintes funções.
Tarefa | Função necessária |
---|---|
Verifique as quotas de um projeto | Projeto Proprietário ou editor ou Leitor de quota |
Modifique quotas e peça quotas adicionais | Projeto
Proprietário ou editor,
Administrador de quotas,
ou função personalizada com a autorização serviceusage.quotas.update
|
Verifique a sua quota
Consola
Na Google Cloud consola, aceda à página Quotas.
Para pesquisar a quota que quer atualizar, use a opção Filtrar tabela. Se não souber o nome da quota, use os links nesta página.
Erros quando excede a sua quota
Se exceder uma quota com um comando gcloud
, o gcloud
gera uma mensagem de erro quota exceeded
e regressa com o código de saída 1
.
Se exceder uma quota com um pedido de API, Google Cloud é devolvido o seguinte código de estado HTTP: HTTP 413 Request Entity Too Large
.
Peça quota adicional
Peça quota adicional na página Quotas da Google Cloud consola. Os pedidos de quota demoram entre 24 e 48 horas a serem processados.
Consola
Na Google Cloud consola, aceda à página Quotas.
Na página Quotas, selecione as quotas que quer alterar.
Na parte superior da página, clique em
Editar quotas.Preencha o seu nome, email e número de telefone e, de seguida, clique em Seguinte.
Preencha o pedido de quota e, de seguida, clique em Concluído.
Envie o seu pedido.
Disponibilidade de recursos
Cada quota representa um número máximo para um determinado tipo de recurso que pode criar, desde que esse recurso esteja disponível. É importante ter em atenção que as quotas não garantem a disponibilidade de recursos. Mesmo que tenha quota disponível, não pode criar um novo recurso se este não estiver disponível.
Por exemplo, pode ter quota suficiente para criar um novo endereço IP externo regional na região us-central1
, mas isso não seria possível se não existissem endereços IP externos disponíveis nessa região. A disponibilidade de recursos zonais também pode afetar a sua capacidade de criar um novo recurso.
As situações em que os recursos estão indisponíveis numa região inteira são raras. No entanto, os recursos numa zona podem esgotar-se ocasionalmente, normalmente sem afetar o contrato de nível de serviço (SLA) para o tipo de recurso. Para mais informações, reveja o SLA relevante para o recurso.
O que se segue?
- Saiba mais acerca dos recursos do Dataproc Metastore.
- Saiba mais sobre os preços do Dataproc Metastore.