Neste documento, listamos as quotas que se aplicam ao Dataplex.
Uma cota restringe quanto de um determinado recurso compartilhado do Google Cloud o projeto do Google Cloud pode usar, incluindo hardware, software e componentes de rede. Dessa forma, as cotas fazem parte de um sistema que:
- monitora o uso ou o consumo de produtos e serviços do Google Cloud;
- restringe o consumo desses recursos por motivos, que garantem imparcialidade e reduzem picos de uso;
- mantém as configurações que aplicam automaticamente restrições prescritas;
- fornece um meio de solicitar ou faz alterações na cota.
Na maioria dos casos, quando uma cota é excedida, o sistema bloqueia imediatamente o acesso ao recurso relevante do Google. Além disso, a tarefa que você está tentando executar falha. Na maioria dos casos, as cotas se aplicam a todos os projetos do Google Cloud. Além disso, elas são compartilhadas entre todos os aplicativos e endereços IP que usam esse projeto.
Também há limites em recursos do Dataplex. Esses limites não estão relacionados ao sistema de cotas. Não é possível mudar os limites, a menos que seja indicado o contrário.
O Dataplex aplica cotas no número de solicitações de API durante uma período específico e o número de recursos que podem ser criados em uma projeto. As cotas protegem você de picos imprevistos de uso e sobrecarga serviços. Saiba mais sobre por que as cotas são aplicadas.
Quanto mais você usar o Dataplex, suas necessidades de cota podem aumentar. Se a cota for muito baixa para atender às suas necessidades ou se você espera uma de uso, você poderá solicitar um aumento de cota.
Cotas para solicitações
A API Dataplex aplica cotas ao recurso do Dataplex Catalog de gerenciamento e pesquisa em níveis diferentes, independentemente das origem. Isso inclui as solicitações originadas diretamente de chamadas de API, bibliotecas de cliente, a Google Cloud CLI e o console do Google Cloud.
As cotas a seguir se aplicam às solicitações do Dataplex:
| Cota | Padrão |
|---|---|
| Solicitações de leitura de entradas e aspectos por projeto, por região e por minuto | 6.000 |
| Solicitações de gravação de entradas e aspectos por projeto, por região e por minuto | 1500 |
| Ler solicitações de tipos de aspecto, tipos de entrada e grupos de entrada por projeto, por usuário, por minuto | 100 |
| Ler solicitações de tipos de aspecto, tipos de entrada e grupos de entrada por projeto a cada minuto | 200 |
| Escrever solicitações para tipos de aspecto, tipos de entrada e grupos de entrada por projeto, por usuário, por minuto | 10 |
| Escrever solicitações para tipos de aspecto, tipos de entrada e grupos de entrada por projeto a cada minuto | 20 |
| Solicitações de pesquisa por projeto, por usuário e por minuto | 900 |
| Solicitações de pesquisa por projeto a cada minuto | 1200 |
| Solicitações de pesquisa por organização por minuto | 2400 |
| Solicitações de pesquisa por organização a cada hora | 14400 |
Para cada solicitação do Dataplex listada na tabela a seguir, a cota é aplicada no nível por projeto e por projeto por usuário.
| Cota | Exemplos |
|---|---|
| Solicitações de leitura para gerenciamento de recursos | Acessar um lake, listar as zonas |
| Solicitações de gravação para gerenciamento de recursos | Criar um lake e excluir um recurso |
| Receber solicitações de metadados | Acessar uma entidade, receber uma partição |
| Listar solicitações de metadados | Listar entidades, listar partições |
| Solicitações de gravação de metadados | Atualizar uma entidade, excluir uma partição |
| Solicitações de leitura para recursos de tarefa e job | Receber uma tarefa, listar jobs |
| Escrever solicitações para recursos de tarefa e job | Criar uma tarefa e cancelar um job |
| Definir solicitações de política de IAM | Definir uma política do IAM. |
Cotas para recursos
A cota de recursos é aplicada no nível por projeto para os seguintes tipos de recursos: lake, zona, ativo, tarefa sob demanda, tarefa recorrente. É possível verificar o uso atual da cota do Dataplex na Cotas no console do Google Cloud.
Solicitar aumento de cota
No console do Google Cloud, acesse a página Cotas.
A página mostra uma lista de cotas.
Selecione as cotas que você quer modificar e clique em Editar cotas.
Insira a nova cota selecionada.
Clique em Enviar solicitação.
Para aumentar ou diminuir a maioria das cotas, use o console do Google Cloud. Para mais informações, consulte Solicitar uma cota maior.
Dependências de cota
O uso do Dataplex pode envolver outros produtos do Google Cloud. Por exemplo, a descoberta de dados requer a invocação do Cloud Storage e/ou APIs do BigQuery para interagir com os recursos. Esses produtos têm cotas de nível de projeto, o que inclui cotas que se aplicam a o uso do Dataplex.
Páginas de cota de outros produtos que podem ser usados com o Dataplex:
Esta não é uma lista completa.
Limites
Os limites a seguir se aplicam ao catálogo e à pesquisa do Dataplex:
| Limite | Valor |
|---|---|
| Tamanho de uma solicitação de entrada e aspecto | 2 MB |
| Tamanho de um ID de entrada | 4.000 caracteres |
| Tamanho de um nome totalmente qualificado em uma entrada | 4.000 caracteres |
| Tamanho do nome de exibição da origem de entrada em uma entrada | 500 caracteres |
| Tamanho da descrição da fonte de entrada em uma entrada | 2.000 caracteres |
| Tamanho do recurso de origem de entrada em uma entrada | 4.000 caracteres |
| Tamanho do sistema de origem de uma entrada | 64 caracteres |
| Tamanho da plataforma de origem de entrada em uma entrada | 64 caracteres |
| Tamanho dos rótulos da origem em uma entrada | 128 caracteres para cada chave e valor |
| Tamanho do conteúdo JSON em um aspecto | 120 KB |
| Tamanho total de uma entrada | 5 MB |
| Número máximo de aspectos em uma entrada | 10.000 |
| Tamanho do nome de exibição do tipo de entrada, do tipo de aspecto e do grupo de entrada | 256 |
| Tamanho da descrição do tipo de entrada, tipo de aspecto e grupo de entrada | 1024 |
| Número máximo de tipos de aspecto obrigatórios em um tipo de entrada | 20 |
| Número máximo de valores de tipo enumerado em um modelo de tipo de aspecto | 1024 |
| Número máximo de itens nos resultados da pesquisa do Dataplex | 500 |