La réplication est la possibilité de créer des copies d'une instance Cloud SQL ou d'une base de données sur site, et de décharger les tâches vers les copies.
Introduction
La principale raison de l'utilisation de la réplication est de procéder au scaling de l'utilisation des données dans une base de données sans dégrader les performances.
Autres raisons possibles :
- Migrer des données entre régions
- Migrer des données entre différentes plates-formes
- Migrer des données depuis une base de données sur site vers Cloud SQL
En outre, une instance dupliquée peut être promue si l'instance d'origine est corrompue.
Lorsque vous faites référence à une instance Cloud SQL, l'instance répliquée est appelée instance principale et les copies sont appelées instances dupliquées avec accès en lecture. L'instance principale et les instances dupliquées avec accès en lecture résident dans Cloud SQL.
Lorsque vous faites référence à une base de données sur site, le scénario de réplication est appelé réplication depuis un serveur externe. Dans ce scénario, la base de données répliquée est le serveur de base de données source. Les copies qui résident dans Cloud SQL sont appelées instances dupliquées Cloud SQL. Il existe également une instance qui représente le serveur de base de données source dans Cloud SQL appelé instance de représentation source.
Dans un scénario de reprise après sinistre, vous pouvez promouvoir une instance répliquée afin de la convertir en instance principale. Vous pouvez ainsi l'utiliser à la place d'une instance située dans une région subissant une interruption de service. Vous pouvez également promouvoir une instance répliquée en vue de remplacer une instance corrompue.
Cloud SQL est compatible avec les types d'instances dupliquées suivants :
- Instances dupliquées avec accès en lecture
- Instances dupliquées interrégionales avec accès en lecture
- Instances répliquées en cascade avec accès en lecture
Grâce à l'application des connecteurs, vous pouvez n'autoriser que le proxy d'authentification Cloud SQL ou les connecteurs de langage Cloud SQL pour vous connecter aux instances Cloud SQL. Avec cette option d'imposition de connecteurs, Cloud SQL rejette les connexions directes à la base de données. Vous ne pouvez pas créer d'instances dupliquées avec accès en lecture pour une instance pour laquelle l'application des connecteurs est activée. De même, si une instance comporte des instances dupliquées avec accès en lecture, vous ne pouvez pas activer l'application des connecteurs pour cette instance.
Vous pouvez également utiliser Database Migration Service pour la réplication continue d'un serveur de base de données source vers Cloud SQL. Remarque: Cloud SQL permet aux utilisateurs de gérer leur propre réplication à l'aide des fonctionnalités de réplication logique de PostgreSQL.Cloud SQL n'est pas compatible avec la réplication entre deux serveurs externes.
Instances dupliquées avec accès en lecture
Vous utilisez une instance dupliquée avec accès en lecture pour décharger les tâches d'une instance Cloud SQL. L'instance dupliquée avec accès en lecture est une copie exacte de l'instance principale. Les données et autres modifications de l'instance principale sont mises à jour quasiment en temps réel sur l'instance dupliquée avec accès en lecture.
Les instances dupliquées avec accès en lecture sont accessibles en lecture seule et il est impossible d'y effectuer des opérations d'écriture. L'instance dupliquée avec accès en lecture traite les requêtes, les requêtes de lecture et le trafic d'analyse, réduisant ainsi la charge sur l'instance principale.
Vous vous connectez à une instance dupliquée directement à l'aide de son nom de connexion et de son adresse IP. Si vous vous connectez à une instance dupliquée à l'aide d'une adresse IP privée, vous n'avez pas besoin de créer une connexion VPC privée supplémentaire pour l'instance dupliquée, car la connexion est héritée de l'instance principale.
Pour savoir comment créer ce type d'instance, consultez la page Créer des instances dupliquées avec accès en lecture. Pour en savoir plus sur la gestion des instances dupliquées avec accès en lecture, consultez la page Gérer les instances dupliquées avec accès en lecture.
Il est recommandé de placer les instances dupliquées avec accès en lecture dans une zone différente de celle de l'instance principale lorsque vous utilisez la haute disponibilité sur votre instance principale. Cette pratique garantit que les instances dupliquées avec accès en lecture continuent de fonctionner lorsque la zone qui contient l'instance principale subit une panne. Pour plus d'informations, consultez la page Présentation de la haute disponibilité.
Sélectionner un type de machine approprié
Les instances dupliquées avec accès en lecture peuvent avoir un type de machine différent de celui de l'instance principale. Vous devez surveiller les métriques de votre instance, telles que l'utilisation du processeur et de la mémoire, pour vous assurer que l'instance dupliquée est dimensionnée correctement pour sa charge de travail, en particulier si elle est plus petite que l'instance principale. Une instance dupliquée sous-dimensionnée est plus susceptible d'offrir des performances médiocres, par exemple avec des événements de mémoire insuffisante.
Impact sur l'option max_connections lorsque l'instance dupliquée avec accès en lecture utilise un type de machine avec moins de mémoire que l'instance principale
Sur une instance PostgreSQL, si vous ne définissez pas l'option max_connections sur la valeur de votre choix, Cloud SQL la définit automatiquement en fonction de la quantité de mémoire de l'instance. Pour en savoir plus, consultez la section Options compatibles. PostgreSQL exige que la valeur de max_connections soit toujours au moins aussi grande sur une instance dupliquée avec accès en lecture que sur son instance principale. Par conséquent, si une instance dupliquée avec accès en lecture a moins de mémoire que son instance principale et que vous n'avez pas défini l'option max_connections, elle peut hériter d'une valeur de max_connections plus élevée en fonction de la taille de l'instance principale. Dans ce cas, si vous utilisez le paramètre max_connections pour limiter le nombre de connexions à l'instance dupliquée, celle-ci peut être surchargée, car la valeur est trop élevée par rapport au type de machine de l'instance. Pour éviter cela, vous pouvez effectuer l'une des opérations suivantes :
- Redimensionner l'instance dupliquée en utilisant un type de machine plus grand.
- Configurer votre application cliente pour qu'elle se limite à un nombre de connexions inférieur à la valeur de
max_connections. - Définir l'option
max_connectionssur l'instance principale et sur l'instance dupliquée avec une valeur appropriée.
Opérations d'index de hachage à l'aide d'instances dupliquées avec accès en lecture
Les opérations d'index de hachage n'utilisent pas la journalisation WAL (Write-Ahead Logging) pour PostgreSQL 9.6. Cloud SQL ne dispose que d'une seule version disponible sous PostgreSQL 10. Tout cela est documenté dans la zone d'avertissement jaune figurant sur la page des versions PostgreSQL. Cela s'applique également aux instances dupliquées avec accès en lecture Cloud SQL.
Comme les mises à jour d'index de hachage ne se propagent pas à l'instance dupliquée avec accès en lecture sous PostgresSQL 9.6, elles ne peuvent pas être utilisées par l'instance dupliquée. Pour contourner ce problème, vous pouvez ne pas utiliser d'instances répliquées avec accès en lecture ou effectuer une mise à niveau vers une version majeure de PostgreSQL (10 ou ultérieure).
Instances dupliquées interrégionales avec accès en lecture
La réplication interrégionale vous permet de créer une instance dupliquée avec accès en lecture dans une région différente de celle de l'instance primaire. Vous créez une instance dupliquée interrégionale avec accès en lecture de la même manière que vous créez une instance dupliquée régionale.
Les instances dupliquées interrégionales :
- améliorent les performances de lecture en rapprochant les instances dupliquées de la région de votre application ;
- fournissent une fonctionnalité de reprise après sinistre supplémentaire afin de se protéger contre une défaillance régionale ;
- vous permettent de migrer des données d'une région à une autre ;
Pour en savoir plus sur les instances dupliquées interrégionales, consultez la page Promouvoir des instances dupliquées pour la migration régionale ou la reprise après sinistre.
Instances répliquées en cascade avec accès en lecture
La réplication en cascade vous permet de créer une instance répliquée avec accès en lecture qui soit hiérarchiquement intégrée à une autre instance répliquée avec accès en lecture, dans la même région ou dans une région différente. Les scénarios suivants correspondent à des cas d'utilisation d'instances répliquées en cascade :
- Reprise après sinistre : vous pouvez utiliser une hiérarchie en cascade d'instances répliquées avec accès en lecture pour simuler la topologie correspondant à votre instance principale et à ses instances répliquées avec accès en lecture. Lors d'une panne, l'instance répliquée avec accès en lecture que vous avez sélectionnée est promue en instance principale et les instances répliquées avec accès en lecture subordonnées à cette nouvelle instance principale continuent d'être répliquées et sont prêtes à être utilisées.
- Amélioration des performances : réduisez la charge sur l'instance principale en déchargeant le travail de réplication sur plusieurs instances répliquées avec accès en lecture.
- Scaling des lectures : vous pouvez disposer d'un plus grand nombre d'instances répliquées pour partager la charge de lecture.
- Réduction des coûts : vous pouvez réduire les coûts de mise en réseau en utilisant une seule instance répliquée en cascade, associée à une réplication interrégionale dans d'autres régions.
Terminologie
- Instance répliquée en cascade : instance répliquée avec accès en lecture qui peut avoir sa propre instance répliquée.
- Niveaux : vous pouvez créer des niveaux d'instances répliquées dans une hiérarchie d'instances répliquées en cascade. Par exemple, si vous ajoutez quatre instances répliquées à une instance, ces quatre instances répliquées se trouvent au même niveau.
- Instances sœurs : plusieurs instances répliquées qui sont répliquées à partir de la même instance principale. Ces instances sœurs sont au même niveau dans la hiérarchie des instances répliquées. Une instance répliquée peut officiellement comporter jusqu'à huit instances sœurs.
- Instance répliquée terminale : instance répliquée avec accès en lecture qui ne comporte aucune instance répliquée d'elle-même. Dans une hiérarchie de réplication à plusieurs niveaux, l'instance répliquée terminale constitue le dernier niveau.
- Promouvoir : action qui convertit une instance répliquée, à n'importe quel niveau de la hiérarchie, en instance principale. Une fois la promotion effectuée, la hiérarchie d'instances répliquées en cascade applicable à cette instance répliquée est conservée.
Configurer des instances répliquées en cascade
Les instances répliquées en cascade vous permettent d'ajouter des instances répliquées avec accès en lecture à n'importe quelle instance répliquée existante. Vous pouvez ajouter jusqu'à quatre niveaux d'instances répliquées, y compris l'instance principale. Lorsque vous promouvez l'instance répliquée en haut d'une hiérarchie d'instances répliquées en cascade, celle-ci devient une instance principale et la réplication en cascade des instances qui lui sont hiérarchiquement inférieures est conservée.
Pour planifier votre configuration, vous devez définir la fonction ciblée pour les instances répliquées avec accès en lecture. Les deux sections suivantes décrivent des configurations de reprise après sinistre et de réplication multirégionale.
Reprise après sinistre
Pour comprendre comment les instances répliquées en cascade peuvent vous aider à rétablir rapidement un système en cas de panne, considérons le scénario de réplication suivant :
Configuration
Indisponibilité
Promotion
Si vous souhaitez utiliser une instance de la région B dans une configuration de reprise après sinistre et si vous disposez :
- d'instances répliquées associées à l'instance principale (instance répliquée A), et situées dans la même région que celle-ci ;
- d'instances répliquées associées à l'instance principale, et situées dans d'autres régions (instances répliquées en cascade) ;
alors vous pouvez créer des instances répliquées avec accès en lecture sous l'instance répliquée en cascade dans la région B.
Dans l'onglet Panne, en cas de panne dans la région A, l'instance répliquée en cascade est promue en instance principale. Elle contient déjà des instances répliquées avec accès en lecture, ce qui réduit l'objectif de temps de récupération (RTO).
Dans l'onglet Promotion, vous constatez que lorsqu'une instance répliquée en cascade est promue, ses instances répliquées sont également promues et continuent de se répliquer dans les niveaux hiérarchiquement inférieurs.
Réplication multirégionale
Un autre cas d'utilisation des instances répliquées en cascade consiste à répartir la capacité de lecture dans une deuxième région, en ciblant une efficience économique maximale. Des instances répliquées en cascade C et D peuvent être créées à partir de l'instance répliquée B. Les clients peuvent répartir les requêtes de lecture sur les instances répliquées B, C et D afin de réduire la charge sur chaque instance répliquée. Le coût du trafic réseau interrégional n'est facturé qu'une seule fois, lors du passage de l'instance principale à l'instance répliquée B. La réplication de B à C et de B à D s'effectue via un transfert réseau intrarégional, qui est gratuit.
Vous pouvez créer une hiérarchie comportant jusqu'à quatre instances à l'aide d'instances répliquées en cascade pour la réplication multirégionale :
Instance principale A → Instance répliquée B → Instance répliquée C et instance répliquée D
Restrictions
- Vous ne pouvez pas supprimer une instance répliquée qui contient des instances répliquées. Pour supprimer l'instance répliquée, vous devez commencer par les instances répliquées terminales qu'elle contient et remonter ainsi dans la hiérarchie.
- La dépendance circulaire au sein d'une région n'est pas acceptée. Pour que l'instance répliquée d'une instance répliquée en cascade se trouve dans la même région que l'instance principale, l'instance répliquée en cascade doit également se trouver dans la même région.
Réplication logique
Cloud SQL vous permet de configurer vos propres solutions de réplication à l'aide des fonctionnalités de réplication logique de PostgreSQL. La réplication logique est une solution flexible qui permet :
- La réplication standard d'une instance principale vers une instance dupliquée
- La réplication sélective de certaines tables ou lignes
- La réplication entre versions majeures de PostgreSQL
- La réplication vers des bases de données non-PostgreSQL
- Des workflows de capture de données modifiées (CDC, Change Data Capture) dans lesquels toutes les modifications de la base de données sont transmises à un consommateur
Pour en savoir plus, consultez la page Configurer la réplication logique. Cette page contient des informations sur les éléments suivants :
- Réplication logique intégrée
- L'extension pglogical
Cas d'utilisation de la réplication
Les cas d'utilisation suivants s'appliquent à chaque type de réplication.
| Nom | Instance principale | Instance dupliquée | Avantages et cas d'utilisation | En savoir plus |
|---|---|---|---|---|
| Instance dupliquée avec accès en lecture | Instance Cloud SQL | Instance Cloud SQL |
|
|
| Instance dupliquée interrégionale avec accès en lecture | Instance Cloud SQL | Instance Cloud SQL |
|
|
| Réplication logique | Toute instance PostgreSQL | Toute instance PostgreSQL ou un client externe |
|
Facturation
- Une instance dupliquée avec accès en lecture est facturée au même tarif qu'une instance Cloud SQL standard. La réplication des données est gratuite.
- La tarification d'une instance dupliquée interrégionale avec accès en lecture est la même que pour créer une instance Cloud SQL dans la région. Reportez-vous à la section Tarifs de l'instance Cloud SQL et sélectionnez la région appropriée. En plus du coût standard associé à l'instance, une instance répliquée interrégionale génère des frais de transfert de données inter-régions pour les journaux de réplication envoyés depuis l'instance principale vers l'instance répliquée, comme décrit dans la section Tarifs de sortie du réseau.
Guide de référence pour les instances dupliquées avec accès en lecture de Cloud SQL
| Sujet | Discussion |
|---|---|
| Sauvegardes | Vous ne pouvez pas configurer de sauvegarde sur une instance dupliquée. |
| Cœurs et mémoire | Les instances dupliquées avec accès en lecture peuvent utiliser un nombre de cœurs et une quantité de mémoire différents de ceux de l'instance principale. |
| Supprimer l'instance principale | Pour pouvoir supprimer une instance principale, vous devez supprimer toutes les instances répliquées avec accès en lecture qui lui sont associées ou les promouvoir en instances autonomes. |
| Supprimer l'instance dupliquée | La suppression d'une instance dupliquée n'a aucune incidence sur l'état de l'instance principale. |
| Désactiver la journalisation préalable | Pour pouvoir désactiver les journaux préalables sur une instance principale, vous devez supprimer toutes les instances dupliquées avec accès en lecture qui lui sont associées ou les promouvoir en instances autonomes. |
| Basculement | Une instance principale ne peut basculer vers une instance répliquée que s'il s'agit d'une instance répliquée de DR. Les instances répliquées avec accès en lecture ne peuvent en aucun cas basculer en cas de panne. |
| Haute disponibilité | Les instances répliquées avec accès en lecture vous permettent d'activer la haute disponibilité sur les instances répliquées. |
| Équilibrage de charge | Cloud SQL n'assure pas l'équilibrage de charge entre les instances dupliquées. Vous pouvez choisir de mettre en œuvre l'équilibrage de charge pour votre instance Cloud SQL. Vous pouvez également utiliser le regroupement de connexions pour répartir les requêtes sur les instances dupliquées avec votre configuration d'équilibrage de charge afin d'améliorer les performances. |
| Intervalles de maintenance | Les instances répliquées avec accès en lecture partagent des intervalles de maintenance avec l'instance principale. Les instances répliquées suivent les paramètres de maintenance de l'instance principale, y compris l'intervalle de maintenance, la reprogrammation et la période de refus de maintenance. Pendant la maintenance, Cloud SQL met d'abord à jour toutes les instances répliquées avec accès en lecture avant de mettre à jour l'instance principale. |
| Instances dupliquées avec accès en lecture multiples | Cloud SQL est compatible avec les instances répliquées en cascade. Par conséquent, vous pouvez créer jusqu'à 10 instances répliquées par instance principale et créer des répliques de ces répliques, jusqu'à quatre niveaux au maximum, y compris l'instance principale. |
| Adresse IP privée | Si vous vous connectez à une instance dupliquée à l'aide d'une adresse IP privée, vous n'avez pas besoin de créer une connexion VPC privée supplémentaire pour l'instance dupliquée, car elle est héritée de l'instance principale. |
| Restauration de l'instance principale | Vous ne pouvez pas restaurer l'instance principale d'une instance répliquée tant que celle-ci existe. Avant de restaurer une instance à partir d'une sauvegarde ou d'effectuer une récupération à un moment précis, vous devez promouvoir ou supprimer toutes les instances dupliquées qui lui sont associées. |
| Paramètres | Les paramètres de l'instance principale, tels que le mot de passe de l'utilisateur postgres et les modifications apportées à la table utilisateur, sont transmis à l'instance dupliquée. |
| Arrêt d'une instance dupliquée | Vous ne pouvez pas utiliser la commande stop sur une instance dupliquée. Vous pouvez utiliser la commande restart, delete ou disable replication, mais vous ne pouvez pas l'arrêter comme vous le feriez avec une instance principale. |
| Mettre à jour une instance dupliquée | Les instances dupliquées avec accès en lecture peuvent à tout moment faire l'objet d'une mise à jour perturbatrice. |
| Tables utilisateur | Vous ne pouvez pas apporter de modifications à l'instance dupliquée. Toutes les modifications apportées aux utilisateurs doivent être effectuées sur l'instance principale. |
Étape suivante
- Apprenez à créer une instance dupliquée avec accès en lecture.
- Apprenez à configurer la haute disponibilité d'une instance.