Trabalhar com a replicação entre data centers

Selecione uma versão da documentação:

Nesta página, descrevemos como usar a replicação entre data centers criando e trabalhando com clusters de banco de dados secundários no Kubernetes.

Para uma visão geral conceitual da replicação entre data centers, consulte Sobre a replicação entre data centers.

Antes de começar

  • Instale a versão 1.1.0 ou mais recente do operador do AlloyDB Omni para implantar o AlloyDB Omni em um cluster do Kubernetes no data center primário e em um cluster do Kubernetes no data center secundário.
  • Crie um cluster de banco de dados do AlloyDB Omni no cluster do Kubernetes no data center primário.

Criar um cluster de banco de dados secundário

Para criar um cluster de banco de dados secundário do AlloyDB Omni e ativar a replicação do cluster de banco de dados primário, siga estas etapas:

Kubernetes

  1. Verifique se a conectividade externa está ativada no cluster de banco de dados primário do AlloyDB Omni. Se a conectividade externa não estiver ativada, adicione o seguinte à seção de especificação do manifesto do cluster de banco de dados:

      kind: DBCluster
  spec:
   allowExternalIncomingTraffic: true

  2. Para usar a replicação entre data centers com um cluster de banco de dados primário que tenha a HA ativada, verifique se os servidores de banco de dados primário e em espera no cluster de banco de dados primário têm espaço adequado para o registro prévio de escrita (WAL) para acomodar os arquivos do WAL necessários para a replicação no cluster secundário. Defina o tamanho do WAL para o cluster de banco de dados primário do AlloyDB Omni definindo a seção "spec" do manifesto do cluster de banco de dados:

      kind: DBCluster
  spec:
    primarySpec:
      parameters:
        wal_keep_size: WAL_KEEP_SIZE
        max_wal_size: MAX_WAL_SIZE

    Substitua:

    • WAL_KEEP_SIZE: o tamanho mínimo dos arquivos WAL anteriores armazenados no diretório WAL caso um servidor secundário precise buscá-los para replicação de streaming. Se um servidor secundário conectado ao principal ficar atrasado em mais de wal_keep_size megabytes, o servidor principal poderá remover um segmento WAL de que o servidor secundário precisa. Nesse caso, a conexão de replicação é encerrada. As conexões downstream também vão falhar como resultado. Defina WAL_KEEP_SIZE com um valor que atenda aos requisitos da sua carga de trabalho, com base na taxa de geração de WAL, nas características da rede de replicação e no atraso de replicação entre os data centers em que os clusters de banco de dados primário e secundário estão implantados. O padrão é 100 MB.
    • MAX_WAL_SIZE: tamanho máximo que permite que o WAL aumente durante os checkpoints automáticos do banco de dados. O padrão é 1504 MB. Esse valor precisa ser definido como maior que o valor de wal_keep_size.

  3. Para ativar a replicação no cluster de banco de dados primário, aplique um manifesto semelhante ao seguinte no cluster do Kubernetes no data center primário:

    apiVersion: v1
kind: Secret
metadata:
 name: ha-rep-pw-DB_CLUSTER_NAME
type: Opaque
data:
 rep-user-pw: "ENCODED_PASSWORD"
---
apiVersion: alloydbomni.dbadmin.goog/v1
kind: Replication
metadata:
 name: REPLICATION_NAME
spec:
 dbcluster:
   name: DB_CLUSTER_NAME
 upstream:
   password:
     name: ha-rep-pw-DB_CLUSTER_NAME

    Substitua o seguinte:

    • DB_CLUSTER_NAME: o nome do cluster de banco de dados, por exemplo, dbc-1.
    • ENCODED_PASSWORD: a senha do usuário do banco de dados a ser usada para replicação de bancos de dados secundários, codificada como uma string base64, por exemplo, Q2hhbmdlTWUxMjM= for ChangeMe123. O valor padrão é alloydbreplica.
    • REPLICATION_NAME: o nome da replicação, por exemplo, replication-1.

    Aguarde até que o status da replicação seja "Pronto".

  4. Para receber as informações de conexão upstream usadas para configurar a replicação no cluster de banco de dados secundário, execute o seguinte comando:

      kubectl get replication REPLICATION_NAME
  kubectl get replication REPLICATION_NAME -o json | jq .status.upstream

    Um exemplo de resposta é parecido com este:

      {
   "host": "35.230.32.36",
   "password": {
     "name": "ha-rep-pw-dbc-1"
   },
   "port": 5432,
   "replicationSlotName": "dbc_1_replication_1",
   "username": "alloydbreplica"
  }

  5. Anote a resposta, porque ela será necessária para ativar a replicação no cluster de banco de dados secundário na próxima etapa.

  6. Crie um cluster do AlloyDB Omni no cluster do Kubernetes no data center secundário com uma configuração idêntica ao cluster de banco de dados primário.

  7. Verifique se a conectividade externa está ativada no cluster de banco de dados secundário do AlloyDB Omni.

  8. Se a conectividade externa não estiver ativada, adicione o seguinte à seção de especificação do manifesto:

     allowExternalIncomingTraffic: true

  9. Para ativar a replicação no cluster de banco de dados secundário, aplique um manifesto semelhante ao seguinte ao cluster do Kubernetes no data center secundário:

      apiVersion: v1
  kind: Secret
  metadata:
    name: ha-rep-pw-SECONDARY_DB_CLUSTER_NAME
  type: Opaque
  data:
    rep-user-pw: "ENCODED_PASSWORD"
  ---
  apiVersion: alloydbomni.dbadmin.goog/v1
  kind: Replication
  metadata:
    name: SECONDARY_REPLICATION_NAME
  spec:
    dbcluster:
      name: SECONDARY_DB_CLUSTER_NAME
    downstream:
      host: PRIMARY_HOST
      port: PRIMARY_PORT
      username: alloydbreplica
      password:
        name: ha-rep-pw-SECONDARY_DB_CLUSTER_NAME
      replicationSlotName: PRIMARY_REPLICATION_SLOT
      control: setup

    Substitua o seguinte:

    • SECONDARY_DB_CLUSTER_NAME: o nome do cluster de banco de dados secundário, por exemplo, dbc-2.
    • ENCODED_PASSWORD: a senha do usuário do banco de dados a ser usada para replicar o cluster de banco de dados primário, codificada como uma string base64, por exemplo, Q2hhbmdlTWUxMjM= for ChangeMe123. O valor padrão é alloydbreplica.
    • SECONDARY_REPLICATION_NAME: o nome da replicação, por exemplo, replication-2.
    • PRIMARY_HOST: o endpoint de conexão do cluster de banco de dados primário da resposta na etapa 3, que o banco de dados secundário pode acessar para replicação.
    • PRIMARY_PORT: a porta de conexão do cluster de banco de dados primário da resposta na etapa 3, que o banco de dados secundário pode acessar para replicação.
    • PRIMARY_REPLICATION_SLOT: o nome do slot de replicação no cluster de banco de dados primário da resposta na etapa 3 que o banco de dados secundário pode usar para replicação.

Visualizar a replicação no cluster de banco de dados secundário

Para visualizar informações detalhadas sobre um cluster de banco de dados secundário do AlloyDB Omni e o status de replicação dele, execute os seguintes comandos:

Kubernetes 

kubectl get dbcluster SECONDARY_DB_CLUSTER_NAME
kubectl get replication SECONDARY_REPLICATION_NAME

Quando o cluster de banco de dados secundário é configurado e tem replicação de transmissão do cluster de banco de dados primário, o status da replicação é "Pronto" e "Íntegro".

Promover um cluster de banco de dados secundário

Antes de promover um cluster de banco de dados secundário, siga estas etapas para verificar se ele aplicou todas as transações recebidas do cluster primário:

Kubernetes

  • Verifique o status da replicação do cluster de banco de dados secundário para garantir que ele seja "Pronto" e "Íntegro".

    kubectl get replication SECONDARY_REPLICATION_NAME

  • Interrompa todas as gravações no cluster de banco de dados primário. Execute a consulta a seguir no cluster de banco de dados primário para verificar o atraso de replicação do banco de dados secundário. Confirme se o resultado mostra um atraso mínimo.

    O ideal é um valor de atraso igual a 0. Se o atraso for maior que 0, ainda será possível promover o cluster de banco de dados secundário, mas há o risco de perder algumas transações recentes já confirmadas no cluster de banco de dados primário.

     psql -h PRIMARY_HOST -U postgres -d postgres -c 'SELECT application_name, pg_wal_lsn_diff(pg_current_wal_lsn(), replay_lsn) AS replay_lag FROM pg_stat_replication;'

Para promover um cluster de banco de dados secundário a um cluster de banco de dados primário, atualize o campo control do manifesto de replicação do cluster de banco de dados secundário para promote e aplique isso no cluster do Kubernetes no data center secundário.

Kubernetes 

    apiVersion: v1
    kind: Secret
    metadata:
      name: ha-rep-pw-SECONDARY_DB_CLUSTER_NAME
    type: Opaque
    data:
      rep-user-pw: "ENCODED_PASSWORD"
    ---
    apiVersion: alloydbomni.dbadmin.goog/v1
    kind: Replication
    metadata:
      name: SECONDARY_REPLICATION_NAME
    spec:
      dbcluster:
        name: SECONDARY_DB_CLUSTER_NAME
      downstream:
        host: PRIMARY_HOST
        port: PRIMARY_PORT
        username: alloydbreplica
        password:
          name: ha-rep-pw-SECONDARY_DB_CLUSTER_NAME
        replicationSlotName: PRIMARY_REPLICATION_SLOT
        control: promote

Realizar uma troca

Antes de realizar uma troca, verifique se os clusters de banco de dados primário e secundário pertencentes aos dois data centers estão on-line e em um estado íntegro.

Para garantir a consistência dos dados dos clusters de banco de dados primário e secundário durante a troca, siga estas etapas para verificar se o cluster de banco de dados secundário aplicou todas as transações recebidas do cluster de banco de dados primário:

Kubernetes

  • Verifique o status da replicação do cluster de banco de dados secundário para garantir que ele seja "Pronto" e "Íntegro".

    kubectl get replication SECONDARY_REPLICATION_NAME

  • Interrompa todas as gravações no cluster de banco de dados primário. Execute a consulta a seguir no cluster de banco de dados primário para verificar o atraso de replicação do banco de dados secundário. Confirme se o resultado mostra um valor de atraso igual a 0.

     psql -h PRIMARY_HOST -U postgres -d postgres -c 'SELECT application_name, pg_wal_lsn_diff(pg_current_wal_lsn(), replay_lsn) AS replay_lag FROM pg_stat_replication;'

Para realizar uma troca, siga estas etapas:

Kubernetes

  1. Para converter o cluster de banco de dados secundário do AlloyDB Omni em um cluster de banco de dados primário, atualize o manifesto de replicação no cluster do Kubernetes no data center secundário da seguinte maneira:

       apiVersion: v1
   kind: Secret
   metadata:
    name: ha-rep-pw-SECONDARY_DB_CLUSTER_NAME
   type: Opaque
   data:
     rep-user-pw: "ENCODED_PASSWORD"
   ---
   apiVersion: alloydbomni.dbadmin.goog/v1
   kind: Replication
   metadata:
    name: SECONDARY_REPLICATION_NAME
   spec:
    dbcluster:
       name: SECONDARY_DB_CLUSTER_NAME
     upstream:
       password:
         name: ha-rep-pw-SECONDARY_DB_CLUSTER_NAME

    Aguarde até que o status da replicação seja "Pronto".

  2. Para receber as informações de conexão upstream da replicação, execute o seguinte comando:

    kubectl get replication SECONDARY_REPLICATION_NAME
kubectl get replication SECONDARY_REPLICATION_NAME -o json | jq .status.upstream

    Um exemplo de resposta é parecido com este:

     {
   "host": "34.23.207.137",
   "password": {
     "name": "ha-rep-pw-dbc-2"
   },
   "port": 5432,
   "replicationSlotName": "dbc_2_replication_2",
   "username": "alloydbreplica"
 }

  3. Para converter o cluster de banco de dados primário do AlloyDB Omni em um cluster de banco de dados secundário, atualize o manifesto de replicação no cluster do Kubernetes no data center primário, desta forma:

        apiVersion: v1
    kind: Secret
    metadata:
     name: ha-rep-pw-DB_CLUSTER_NAME
    type: Opaque
    data:
      rep-user-pw: "ENCODED_PASSWORD"
    ---
    apiVersion: alloydbomni.dbadmin.goog/v1
    kind: Replication
    metadata:
      name: REPLICATION_NAME
    spec:
      dbcluster:
        name: DB_CLUSTER_NAME
      downstream:
        host: SECONDARY_HOST
        port: SECONDARY_PORT
        username: alloydbreplica
        password:
          name: ha-rep-pw-DB_CLUSTER_NAME
        replicationSlotName: SECONDARY_REPLICATION_SLOT
       control: rewind

    Aguarde até que o status da replicação seja "Pronto" e "Íntegro".

  4. Para verificar o status da replicação, use:

    kubectl get replication REPLICATION_NAME