Quotas et limites

Ce document présente les quotas et limites de Data Catalog.

Un quota limite la quantité d'une ressource Google Cloud partagée spécifique que votre projet Google Cloud peut utiliser, y compris les composants matériels, logiciels et réseau. Les quotas font partie d'un système qui effectue les opérations suivantes:

  • Surveille votre utilisation ou votre consommation des produits et services Google Cloud
  • Limite la consommation de ces ressources pour des raisons telles que l'équité et la réduction des pics d'utilisation
  • Gère des configurations qui appliquent automatiquement des restrictions recommandées
  • Fournit un moyen de modifier le quota ou de demander des modifications

Dans la plupart des cas, lorsqu'un quota est dépassé, le système bloque immédiatement l'accès à la ressource Google concernée, et la tâche que vous essayez d'exécuter échoue. Dans la plupart des cas, les quotas s'appliquent à chaque projet Google Cloud. Ils sont partagés entre toutes les applications et adresses IP qui utilisent ces projets Google Cloud.

Pour augmenter ou diminuer certains quotas, utilisez la console Google Cloud. Pour en savoir plus, consultez la section Demander un quota plus élevé.

Des limites s'appliquent également aux ressources. Ces limites ne sont pas liées au système de quotas. Sauf indication contraire, les limites ne peuvent pas être modifiées.

Par défaut, les quotas et les limites s'appliquent pour chaque projet.

Quotas

Pour calculer le RPM (requêtes par minute) d'une organisation, Data Catalog additionne le QPM des projets de l'organisation.

Data Catalog utilise les quotas de RPM pour éviter la surcharge du service au lieu de contrôler la répartition de la charge de travail des requêtes entre les projets. Par conséquent, le projet et l'organisation disposent des mêmes quotas de RPM par défaut. En d'autres termes, si une organisation possède plusieurs projets et que la charge de travail de l'un d'entre eux approche le quota de l'organisation par défaut (et du même projet), ce projet peut avoir une incidence sur la charge de travail potentielle des autres projets de l'organisation.

Pour ajuster les quotas d'organisation et de projet séparément, consultez la section Demander un quota plus élevé.

Quota de RPM Valeur par défaut
Lecture 6000
Écriture 1 500
Search 1200

Quotas de traçabilité des données

L'API Data Lineage applique des quotas pour les éléments suivants:

  • Requêtes de lecture qui ne renvoient que les données
  • Écrire des requêtes qui créent ou modifient les données
  • Créer une traçabilité ouverte

L'API Data Lineage applique des quotas de traçabilité des données par projet, par utilisateur et par région. Les quotas par défaut sont les suivants:

Quota de RPM Valeur par défaut
Read 1 000
Écriture 6000
Ouvrir la traçabilité 3 000

Par exemple, vous pouvez envoyer jusqu'à 1 000 requêtes GetProcess par minute dans le projet test-project de la région us avant de dépasser le quota.

Autres quotas

Limites

L'API Data Catalog impose des limites pour les entrées, les tags et les métadonnées métier.

Limites d'entrées

Limite Valeur
Nombre maximal de groupes d'entrées par organisation dans tous les établissements 10 000
Nombre maximal d'entrées par organisation pour l'ensemble des emplacements
(la latence des résultats de recherche peut augmenter si vous la dépassez)		 100 M
Nombre maximal d'entrées par groupe d'entrées 100 000
Mo par entrée 10 Mo
Nombre maximal de résultats de recherche par page 1 000

Limites de tags

Limite Valeur
Champs par modèle de tag 500
Longueur d'un nom de champ dans un modèle de tag 512 octets
Longueur d'un nom de ressource pour un modèle de tag 512 octets
Longueur d'un champ de type chaîne dans un modèle de tag 10 000 octets
Nombre maximal de valeurs d'énumération dans un modèle de tag 100
Tags par entrée 1 000
Somme maximale de deux nombres :
  • Nombre de champs dans tous les tags associés à une entrée
  • Nombre de colonnes dans le schéma facultatif de l'entrée
 15 000
Nombre maximal de tags avec stratégie par taxonomie 100
Nombre maximal de taxonomies par projet 40
Profondeur maximale de l'arborescence de tags avec stratégie
(limite toujours applicable : 100 tags avec stratégie par taxonomie)		 5
Longueur d'un nom de tag avec stratégie 200 octets
Nombre d'entrées ajoutées aux favoris par utilisateur 200

Limites des métadonnées métier

Limite Valeur
Nombre maximal de responsables des données par entrée de données 15
Taille maximale du texte enrichi dans la vue d'ensemble, hors tailles d'image 100 Ko
Taille totale du texte enrichi, images incluses 10 Mo