Scaling de l'environnement

Cloud Composer 1 | Cloud Composer 2 | Cloud Composer 3

Cette page décrit le fonctionnement du scaling de l'environnement dans Cloud Composer 1.

Pour plus d'informations sur le scaling de vos environnements, consultez la section Faire évoluer les environnements.

Environnements redimensionnables

Cloud Composer 1 propose des environnements qui exécutent un nombre constant de nœuds de calcul.

Lorsque vous créez un environnement, vous spécifiez le nombre de nœuds. Ce nombre correspond au nombre de nœuds de calcul dans votre environnement. Cloud Composer répartit la charge entre tous les nœuds de calcul de votre environnement. En plus d'exécuter des nœuds de calcul Airflow, les nœuds de votre environnement exécutent également des programmeurs et d'autres composants d'environnement.

Vous pouvez adapter votre environnement en modifiant le nombre de nœuds.

Paramètres d'évolutivité et de performances

Vous pouvez contrôler les paramètres de scaling et de performances de votre environnement en ajustant les types de machines utilisés par les bases de données Airflow et les composants de serveur Web de votre environnement. Vous pouvez ainsi faire évoluer votre environnement verticalement, en plus du scaling horizontal fourni par le paramètre "Nombre de nœuds". Vous pouvez ajuster les types de machines de la base de données Airflow et du serveur Web à tout moment.

Vous définissez le type de machine pour les nœuds de l'environnement lors de la création de l'environnement. Vous ne pourrez pas modifier ce paramètre ultérieurement. Cela signifie que vous ne pouvez pas effectuer de scaling vertical des nœuds de calcul Airflow dans Cloud Composer 1.

Programmeurs multiples

Airflow 2 peut utiliser plusieurs programmeurs Airflow simultanément. Cette fonctionnalité Airflow est également appelée planificateur de haute disponibilité. Dans Cloud Composer 1, vous pouvez définir le nombre de programmeurs pour votre environnement et l'ajuster à tout moment. Cloud Composer n'effectue pas le scaling automatique du nombre de programmeurs dans votre environnement.

Pour plus d'informations sur la configuration du nombre de programmeurs pour votre environnement, consultez la section Faire évoluer les environnements.

Espace disque de la base de données

L'espace disque de la base de données Airflow augmente automatiquement pour répondre à la demande.

Étape suivante