Ce document liste les quotas qui s'appliquent à Dataplex.
Un quota limite la quantité d'une ressource Google Cloud partagée particulière que votre projet Google Cloud peut utiliser, y compris les composants matériels, logiciels et réseau. Par conséquent, les quotas font partie d'un système qui effectue les opérations suivantes :
- Surveille votre utilisation ou votre consommation des produits et services Google Cloud
- Limite la consommation de ces ressources pour des raisons telles que l'équité et la réduction des pics d'utilisation.
- Gère des configurations qui appliquent automatiquement des restrictions recommandées.
- Fournit un moyen de demander ou d'effectuer des modifications de quota.
Dans la plupart des cas, lorsqu'un quota est dépassé, le système bloque immédiatement l'accès à la ressource Google concernée et la tâche que vous essayez d'effectuer échoue. Dans la plupart des cas, les quotas s'appliquent à chaque projet Google Cloud. Ils sont partagés entre toutes les applications et adresses IP qui utilisent ce projet.
Des limites s'appliquent également aux ressources Dataplex. Ces limites ne sont pas liées au système de quotas. Sauf indication contraire, les limites ne peuvent pas être modifiées.
Dataplex applique des quotas sur le nombre de requêtes API pendant une période donnée et le nombre de ressources pouvant être créées dans un projet. Les quotas vous protègent contre les pics d'utilisation imprévus et la surcharge des services. Découvrez pourquoi les quotas sont appliqués.
Plus vous utilisez Dataplex, plus vos besoins en quotas peuvent augmenter. Si un quota n'est pas suffisant pour répondre à vos besoins ou si vous prévoyez une augmentation prochaine de l'utilisation, vous pouvez demander une augmentation de quota de manière proactive.
Quotas pour les requêtes
L'API Dataplex applique des quotas pour la gestion des ressources du catalogue Dataplex et les requêtes de recherche à différents niveaux, quelle que soit leur origine. Cela inclut les requêtes provenant directement d'appels d'API, de bibliothèques clientes, de Google Cloud CLI et de la console Google Cloud.
Les quotas suivants s'appliquent aux requêtes Dataplex:
| Quota | Par défaut |
|---|---|
| Requêtes de lecture d'entrées et d'aspects par projet, par région et par minute | 6000 |
| Requêtes d'écriture pour les entrées et les aspects par projet, par région et par minute | 1500 |
| Requêtes de lecture pour les types d'aspects, les types d'entrées et les groupes d'entrées par projet, par utilisateur et par minute | 100 |
| Requêtes de lecture pour les types d'aspect, les types d'entrées et les groupes d'entrées par projet et par minute | 200 |
| Requêtes d'écriture pour les types d'aspects, les types d'entrées et les groupes d'entrées par projet, par utilisateur et par minute | 10 |
| Requêtes d'écriture pour les types d'aspect, les types d'entrées et les groupes d'entrées par projet et par minute | 20 |
| Requêtes de recherche par projet, par utilisateur et par minute | 900 |
| Requêtes de recherche par projet et par minute | 1200 |
| Requêtes de recherche par organisation et par minute | 2400 |
| Requêtes de recherche par organisation et par heure | 14400 |
Pour chaque requête Dataplex répertoriée dans le tableau suivant, le quota est appliqué au niveau de chaque projet et au niveau de chaque projet et de chaque utilisateur.
| Quota | Examples |
|---|---|
| Requêtes de lecture pour la gestion des ressources | Obtenir un lac, répertorier les zones |
| Requêtes d'écriture pour la gestion des ressources | Créer un lac de données et supprimer un élément |
| Requêtes de récupération de métadonnées | Obtenir une entité, obtenir une partition |
| Lister les requêtes de métadonnées | Lister les entités et les partitions |
| Requêtes d'écriture de métadonnées | Mettre à jour une entité, supprimer une partition |
| Requêtes de lecture pour les ressources de tâche et de job | Obtenir une tâche, lister les jobs |
| Requêtes d'écriture pour les ressources de tâche et de job | Créer une tâche, annuler un job |
| Requêtes de définition de stratégie IAM | Définir une stratégie IAM |
Quotas pour les ressources
Le quota de ressources est appliqué au niveau de chaque projet pour les types de ressources suivants: lac, zone, élément, tâche à la demande, tâche récurrente. Vous pouvez vérifier votre utilisation actuelle du quota Dataplex sur la page Quotas de la console Google Cloud.
Demander une augmentation du quota
Dans la console Google Cloud, accédez à la page Quotas.
La page affiche une liste de quotas.
Sélectionnez les quotas que vous souhaitez modifier, puis cliquez sur Modifier les quotas.
Saisissez le nouveau quota que vous avez sélectionné.
Cliquez sur Envoyer la requête.
Pour demander une augmentation ou une diminution de la plupart des quotas, vous pouvez utiliser Google Cloud Console. Pour en savoir plus, consultez Demander une augmentation de quota.
Dépendances des quotas
Votre utilisation de Dataplex peut impliquer d'autres produits Google Cloud. Par exemple, la découverte de données nécessite d'appeler les API Cloud Storage et/ou BigQuery pour interagir avec les ressources sous-jacentes. Ces produits ont des quotas qui s'appliquent au niveau de chaque projet, y compris des quotas associés à l'utilisation de Dataplex.
Pages de quotas d'autres produits que vous pourriez utiliser avec Dataplex:
Cette liste n'est pas exhaustive.
Limites
Les limites suivantes s'appliquent au catalogue et à la recherche Dataplex:
| Limite | Valeur |
|---|---|
| Taille d'une requête d'entrée et aspect | 2 Mo |
| Longueur d'un ID d'entrée | 4 000 caractères |
| Longueur d'un nom complet dans une entrée | 4 000 caractères |
| Longueur du nom à afficher de la source d'entrée dans une entrée | 500 caractères |
| Longueur de la description de la source d'entrée dans une entrée | 2 000 caractères |
| Longueur de la ressource source d'entrée dans une entrée | 4 000 caractères |
| Longueur du système source d'entrée dans une entrée | 64 characters |
| Longueur de la plate-forme source d'une entrée | 64 characters |
| Longueur des étiquettes de source d'entrée dans une entrée | 128 caractères pour chaque clé et valeur |
| Taille du contenu JSON d'un aspect | 120 Ko |
| Taille totale d'une entrée | 5 Mo |
| Nombre maximal d'aspects dans une entrée | 10 000 |
| Longueur du nom à afficher du type d'entrée, du type d'aspect et du groupe d'entrées | 256 |
| Longueur de la description du type d'entrée, du type d'aspect et du groupe d'entrées | 1 024 |
| Nombre maximal de types d'aspect requis dans un type d'entrée | 20 |
| Nombre maximal de valeurs d'énumération dans un modèle de type d'aspect | 1 024 |
| Nombre maximal d'éléments dans les résultats de recherche Dataplex | 500 |