Quotas Cloud TPU

Ce document répertorie les quotas qui s'appliquent à Cloud TPU. Pour en savoir plus sur les tarifs de Cloud TPU, consultez la page Tarifs de Cloud TPU.

Un quota limite la quantité d'une ressource Google Cloud partagée particulière que votre projet Google Cloud peut utiliser, y compris les composants matériels, logiciels et réseau. Par conséquent, les quotas font partie d'un système qui effectue les opérations suivantes :

  • Surveille votre utilisation ou votre consommation des produits et services Google Cloud
  • Limite la consommation de ces ressources pour des raisons telles que l'équité et la réduction des pics d'utilisation.
  • Gère des configurations qui appliquent automatiquement des restrictions recommandées.
  • Fournit un moyen de demander ou d'effectuer des modifications de quota.

Dans la plupart des cas, lorsqu'un quota est dépassé, le système bloque immédiatement l'accès à la ressource Google concernée et la tâche que vous essayez d'effectuer échoue. Dans la plupart des cas, les quotas s'appliquent à chaque projet Google Cloud. Ils sont partagés entre toutes les applications et adresses IP qui utilisent ce projet.

Quota de TPU

Des quotas différents s'appliquent à chaque version de TPU. Par exemple, il existe différents quotas pour TPU v2, TPU v3, etc. Pour chaque version de TPU, il existe différents types de quotas: à la demande et préemptifs (spot). Le tableau suivant décrit les différents types de quotas.

Type de quota Description Valeur par défaut Procédure de demande Options pour la création de TPU
À la demande Nombre de ressources à la demande auxquelles vous avez accès. Les ressources à la demande ne seront pas préemptées, mais le quota à la demande ne garantit pas que vous disposerez de suffisamment de ressources Cloud TPU disponibles pour répondre à votre requête. v3-8 et v2-8: 16 TensorCores
Toutes les autres: 0
Consultez la section Demander une augmentation de quota. Aucun indicateur nécessaire (sélectionné par défaut).
VM préemptive Nombre de ressources Cloud TPU préemptives auxquelles vous avez accès. Ce quota s'applique à la fois aux TPU préemptifs et aux VM TPU Spot. Les ressources préemptives peuvent être préemptées pour libérer de la place pour les tâches de priorité plus élevée. Le quota préemptif ne garantit pas que vous aurez suffisamment de ressources Cloud TPU disponibles pour répondre à votre requête. Pour en savoir plus, consultez les pages TPU préemptifs et Gérer des VM TPU Spot. v3-8 et v2-8: 48 TensorCores
Toutes les autres: 0
Consultez la section Demander une augmentation de quota.

Les quotas de TPU sont spécifiés en termes de cœurs de TPU par projet et par zone, ou de cœurs de TPU par projet et par région.

Quotas de TPU v5p

Vous pouvez utiliser votre quota TPU v5p avec n'importe quelle combinaison de cœurs. Par exemple, si vous disposez d'un quota pour 32 cœurs, vous pouvez utiliser ce quota pour créer quatre tranches de TPU ayant chacune huit cœurs.

Quotas préemptifs:

  • Cœurs TPU v5p préemptifs par projet et par région
  • Cœurs TPU v5p préemptifs par projet et par zone

Quotas à la demande:

  • Cœurs TPU v5p par projet et par région
  • Cœurs TPU v5p par projet et par zone

Quotas de TPU v5e

Le TPU v5e peut être utilisé pour l'entraînement et la diffusion. Des quotas distincts s'appliquent à l'entraînement et à l'inférence, ainsi qu'aux nœuds à hôte unique (cœurs allégés) et à plusieurs hôtes (cœurs pour les pods allégés).

Quotas de diffusion

Quotas de diffusion préemptive:

  • Cœurs de pod TPU v5 lite préemptifs pour la diffusion par projet et par région
  • Cœurs de pod TPU v5 lite préemptifs pour la diffusion par projet et par zone

Quotas de diffusion à la demande:

  • Cœurs de pod TPU v5 Lite pour la diffusion par projet et par région
  • Cœurs de pod TPU v5 Lite pour la diffusion par projet et par zone

Quotas d'entraînement

Quotas d'entraînement préemptif:

  • Cœurs TPU v5 lite préemptifs par projet et par région
  • Cœurs TPU v5 lite préemptifs par projet et par zone
  • Cœurs de pod TPU v5 lite préemptifs par projet et par région
  • Cœurs de pod TPU v5 lite préemptifs par projet et par zone

Quotas d'entraînement à la demande:

  • Cœurs de TPU v5 Lite par projet et par région
  • Cœurs de TPU v5 Lite par projet et par zone
  • Cœurs de pod TPU v5 Lite par projet et par région
  • Cœurs de pod TPU v5 lite par projet et par zone

Quotas TPU v4

Vous pouvez utiliser votre quota TPU v4 avec n'importe quelle combinaison de cœurs. Par exemple, si vous disposez d'un quota pour 32 cœurs, vous pouvez utiliser ce quota pour créer quatre tranches de TPU ayant chacune huit cœurs.

Quotas préemptifs:

  • Cœurs de pod TPU v4 préemptifs par projet et par région
  • Cœurs de pod TPU v4 préemptifs par projet et par zone

Quotas à la demande:

  • Cœurs de pod TPU v4 par projet et par région
  • Cœurs de pod TPU v4 par projet et par zone

Quotas TPU v3

Des quotas de TPU v3 distincts s'appliquent aux TPU à hôte unique (cœur) et aux TPU à hôtes multiples (pod). Vous devez utiliser les quotas de pods v3 pour créer des TPU comportant plus de huit cœurs.

Quotas préemptifs:

  • Cœurs TPU v3 préemptifs par projet et par région
  • Cœurs TPU v3 préemptifs par projet et par zone
  • Cœurs de pod TPU v3 préemptifs par projet et par région
  • Cœurs de pod TPU v3 préemptifs par projet et par zone

Quotas à la demande:

  • Cœurs TPU v3 par projet et par région
  • Cœurs TPU v3 par projet et par zone
  • Cœurs de pod TPU v3 par projet et par région
  • Cœurs de pod TPU v3 par projet et par zone

Quotas TPU v2

Des quotas de TPU v2 distincts s'appliquent aux TPU à hôte unique (cœur) et aux TPU à hôtes multiples (pod).

Quotas préemptifs:

  • Cœurs TPU v2 préemptifs par projet et par région
  • Cœurs TPU v2 préemptifs par projet et par zone
  • Cœurs de pod TPU v2 préemptifs par projet et par région
  • Cœurs de pod TPU v2 préemptifs par projet et par zone

Quotas à la demande:

  • Cœurs TPU v2 par projet et par région
  • Cœurs TPU v2 par projet et par zone
  • Cœurs de pod TPU v2 par projet et par région
  • Cœurs de pod TPU v2 par projet et par zone

Pour en savoir plus sur les puces TPU et les TensorCores, consultez la page Architecture du système TPU.

Afficher et demander un quota supplémentaire

Vous pouvez afficher le quota alloué à votre projet Google Cloud sur la page Quotas de la console Google Cloud. Si vous avez besoin d'un quota Cloud TPU supplémentaire, vous pouvez effectuer une demande sur la page "Quotas". Pour en savoir plus, consultez la section Demander une limite de quota plus élevée.