Cotas e limites

Neste documento, listamos as cotas e os limites do Data Catalog.

Uma cota restringe quanto de um determinado recurso compartilhado do Google Cloud seu projeto do Google Cloud pode usar, incluindo hardware, software e componentes de rede. As cotas fazem parte de um sistema que:

  • monitora o uso ou o consumo de produtos e serviços do Google Cloud;
  • restringe o consumo desses recursos por motivos que incluem garantir a equidade e a redução dos picos de uso;
  • mantém as configurações que aplicam automaticamente restrições prescritas;
  • fornece maneiras de fazer ou solicitar alterações na cota.

Quando uma cota é excedida, na maioria dos casos, o sistema bloqueia imediatamente o acesso ao recurso relevante do Google, e a tarefa que você está tentando executar falha. Na maioria dos casos, as cotas se aplicam a cada projeto do Google Cloud e são compartilhadas por todos os aplicativos e endereços IP que usam esse projeto do Google Cloud.

Para aumentar ou diminuir determinadas cotas, use o console do Google Cloud. Para mais informações, consulte Como solicitar uma cota maior.

Há também limites para recursos. Esses limites não estão relacionados ao sistema de cotas. Não é possível mudar os limites, a menos que isso seja indicado.

Por padrão, as cotas e os limites são aplicados por projeto.

Cotas

Para calcular o QPM de uma organização (consultas por minuto), o Data Catalog soma o QPM dos projetos da organização.

O Data Catalog usa as cotas do QPM para evitar a sobrecarga de serviço em vez de controlar a distribuição da carga de trabalho da solicitação entre projetos. Portanto, o projeto e a organização têm as mesmas cotas padrão do QPM. Em outras palavras, se uma organização tem vários projetos e a carga de trabalho de solicitação de um deles se aproxima da cota padrão da organização (e do mesmo projeto), esse projeto pode afetar a possível carga de trabalho dos outros projetos. na organização.

Para ajustar as cotas da organização e do projeto separadamente, consulte Como solicitar uma cota maior.

Cota do QPM Valor padrão
Ler 6000
Gravar 1.500
Pesquisar 1200

Cotas de linhagem de dados

A API Data Lineage aplica cotas para:

  • Solicitações de leitura que só retornam os dados
  • Escrever solicitações que criam ou alteram os dados
  • Criar linhagem aberta

A API Data Lineage aplica cotas de linhagem de dados por projeto, usuário e região. As cotas padrão são as seguintes:

Cota do QPM Valor padrão
Ler 1000
Gravar 6000
Abrir linhagem 3000

Por exemplo, é possível enviar até 1.000 solicitações GetProcess por minuto no projeto test-project da região us antes de exceder a cota.

Outras cotas

Limites

A API Data Catalog aplica limites a entradas, tags e metadados comerciais.

Limites de entrada

Limite Valor
Número máximo de grupos de entradas por organização em todos os locais 10.000
Número máximo de entradas por organização em todos os locais
(a latência dos resultados da pesquisa pode aumentar quando for excedida)
100 milhões
Número máximo de entradas por grupo de entradas 100 mil
MB por entrada 10 MB
Número máximo de resultados de busca por página 1000

Limites de tags

Limite Valor
Campos por modelo de tag 500
Tamanho de um nome de campo em um modelo de tag 512 bytes
Tamanho do nome de um recurso para um modelo de tag 512 bytes
Comprimento de um campo de string em um modelo de tag 10.000 bytes
Número máximo de valores de enum em um modelo de tag 100
Tags por entrada 1000
Soma máxima de dois números:
  • Número de campos em todas as tags anexadas a uma entrada.
  • Número de colunas no esquema opcional da entrada
15.000
Número máximo de tags de política por taxonomia 100
Número máximo de taxonomias por projeto 40
Profundidade máxima da árvore de tags de política
(as 100 tags de política por taxonomia ainda se aplicam)
5
Comprimento do nome de uma tag de política 200 bytes
Número de entradas com estrela por usuário 200

Limites de metadados comerciais

Limite Valor
Número máximo de administradores de dados por entrada de dados 15
Tamanho máximo de rich text na visão geral, excluindo tamanhos de imagem 100 KB
Tamanho total do rich text, incluindo imagens 10 MB