Crea cluster di amministrazione in una configurazione multi-cluster

In Cluster Anthos on bare metal, configuri i cluster di amministrazione per gestire altri cluster in sicurezza. Puoi creare, aggiornare, eseguire l'upgrade o eliminare i cluster utente dai cluster di amministrazione. I cluster utente eseguono i carichi di lavoro separatamente dall'amministrazione, per cui le informazioni sensibili sono protette.

I cluster di amministrazione che gestiscono carichi di lavoro multi-cluster possono offrire un'affidabilità ad alta disponibilità (HA). In un cluster ad alta disponibilità, in caso di errore di un nodo del piano di controllo, gli altri nodi continuano a funzionare.

Un cluster di amministrazione in un ambiente multi-cluster offre la migliore sicurezza di base. Poiché l'accesso ai dati amministrativi è separato dai carichi di lavoro, chi accede ai carichi di lavoro degli utenti non ha accesso a dati amministrativi sensibili, come le chiavi SSH e i dati degli account di servizio. Di conseguenza, esiste un compromesso tra la sicurezza e le risorse richieste, poiché un cluster di amministrazione separato richiede risorse dedicate per la gestione e i carichi di lavoro.

Puoi creare un cluster di amministrazione utilizzando il comando bmctl. Dopo aver creato un cluster di amministrazione, crei cluster utente per eseguire i carichi di lavoro.

Prerequisiti:

  • La versione più recente di bmctl viene scaricata (gs://anthos-baremetal-release/bmctl/1.11.8/linux-amd64/bmctl) da Cloud Storage.
  • La workstation che esegue bmctl ha connettività di rete con tutti i nodi nei cluster utente di destinazione.
  • La workstation che esegue bmctl ha una connettività di rete al server API del cluster (VIP del piano di controllo).
  • La chiave SSH utilizzata per creare il cluster di amministrazione è disponibile per il root oppure esiste un accesso utente SUDO a tutti i nodi nel cluster di amministrazione di destinazione.
  • L'account di servizio Connect-register è configurato per l'utilizzo con Connect.

Consulta la guida rapida di Cluster Anthos on bare metal per istruzioni dettagliate per la creazione di un cluster ibrido. La creazione di un cluster di amministrazione è simile a quella di un cluster ibrido, tranne per il fatto che non si eseguono carichi di lavoro sul cluster di amministrazione.

Abilita SELinux

Se vuoi abilitare SELinux per proteggere i container, devi assicurarti che sia abilitato in modalità Enforced su tutte le macchine host. A partire da Cluster Anthos on bare metal release 1.9.0 o versioni successive, puoi abilitare o disabilitare SELinux prima o dopo la creazione del cluster o gli upgrade del cluster. SELinux è abilitato per impostazione predefinita su Red Hat Enterprise Linux (RHEL) e CentOS. Se SELinux è disabilitato sulle macchine host o se non sei sicuro, consulta Proteggere i container tramite SELinux per istruzioni su come abilitarlo.

Cluster Anthos on bare metal supporta SELinux solo nei sistemi RHEL e CentOS.

Accedi all'interfaccia a riga di comando gcloud e crea un file di configurazione del cluster di amministrazione

  1. Imposta le credenziali predefinite che Cluster Anthos on bare metal può utilizzare per creare il cluster con il seguente comando:

    gcloud auth application-default login
    
  2. Per utilizzare le funzionalità di abilitazione automatica dell'API e creazione dell'account di servizio in questa pagina, concedi il ruolo Proprietario del progetto a questa entità. Se il proprietario non può avere il ruolo di Proprietario del progetto, completa il passaggio successivo.

  3. Per garantire che la creazione del cluster vada a buon fine senza concedere il ruolo Proprietario del progetto, aggiungi i seguenti ruoli IAM all'entità:

    • Amministratore account di servizio
    • Amministratore chiavi account di servizio
    • Amministratore IAM progetto
    • Visualizzatore Compute
    • Amministratore Service Usage

    Se l'entità è un account di servizio con questi ruoli, puoi eseguire:

    export GOOGLE_APPLICATION_CREDENTIALS=JSON_KEY_FILE
    

    Sostituisci JSON_KEY_FILE con il percorso del file della chiave JSON dell'account di servizio.

  4. Ottieni l'ID del tuo progetto Google Cloud e archivialo in una variabile di ambiente per utilizzarlo per la creazione del cluster:

    export CLOUD_PROJECT_ID=$(gcloud config get-value project)
    

Crea una configurazione del cluster di amministrazione con bmctl

Dopo aver effettuato l'accesso a gcloud e aver configurato il progetto, puoi creare il file di configurazione del cluster con il comando bmctl.

Nell'esempio seguente, tutti gli account di servizio vengono creati automaticamente dal comando bmctl create config:

bmctl create config -c ADMIN_CLUSTER_NAME --enable-apis \
    --create-service-accounts --project-id=CLOUD_PROJECT_ID

Sostituisci quanto segue:

  • ADMIN_CLUSTER_NAME: il nome del nuovo cluster.
  • CLOUD_PROJECT_ID: il tuo ID progetto Google Cloud o la variabile di ambiente $CLOUD_PROJECT_ID.

Ecco un esempio per creare un file di configurazione per un cluster di amministrazione denominato admin1 associato all'ID progetto my-gcp-project:

bmctl create config -c admin1 --create-service-accounts --enable-apis --project-id=my-gcp-project

Il file è scritto in bmctl-workspace/admin1/admin1.yaml.

In alternativa all'attivazione automatica delle API e alla creazione di account di servizio, puoi anche fornire ai tuoi account di servizio esistenti le autorizzazioni IAM corrette. Ciò significa che puoi saltare la creazione automatica dell'account di servizio nell'esempio precedente nel comando bmctl:

bmctl create config -c admin1

Modifica il file di configurazione del cluster

Ora che hai il file di configurazione di un cluster, modificalo per apportare le seguenti modifiche:

  1. Fornisci la chiave privata SSH per accedere ai nodi del cluster di amministrazione:

    # bmctl configuration variables. Because this section is valid YAML but not a valid Kubernetes
    # resource, this section can only be included when using bmctl to
    # create the initial admin/admin cluster. Afterwards, when creating user clusters by directly
    # applying the cluster and node pool resources to the existing cluster, you must remove this
    # section.
    gcrKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-gcr.json
    sshPrivateKeyPath: /path/to/your/ssh_private_key
    gkeConnectAgentServiceAccountKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-connect.json
    gkeConnectRegisterServiceAccountKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-register.json
    cloudOperationsServiceAccountKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-cloud-ops.json
    
  2. Per le versioni 1.7.0 e successive, devi registrare i tuoi cluster in Connect all'ambiente di progetto.

    • Se hai creato il file di configurazione, utilizzando l'abilitazione automatica delle API e le funzionalità di creazione dell'account di servizio, puoi saltare questo passaggio.
    • Se hai creato il file di configurazione senza utilizzare l'abilitazione automatica delle API e le funzionalità di creazione dell'account di servizio, fai riferimento alle chiavi JSON dell'account di servizio scaricate nei campi gkeConnectAgentServiceAccountKeyPath e gkeConnectRegisterServiceAccountKeyPath del file di configurazione del cluster corrispondenti.
  3. Verifica che la configurazione specifichi un tipo di cluster admin (valore predefinito):

    spec:
      # Cluster type. This can be:
      #   1) admin:  to create an admin cluster. This can later be used to create user clusters.
      #   2) user:   to create a user cluster. Requires an existing admin cluster.
      #   3) hybrid: to create a hybrid cluster that runs admin cluster components and user workloads.
      #   4) standalone: to create a cluster that manages itself, runs user workloads, but does not manage other clusters.
      type: admin
    
  4. Modifica il file di configurazione per specificare un piano di controllo con più nodi e disponibilità elevata. Specifica un numero dispari di nodi per avere un quorum di maggioranza per la disponibilità elevata:

      # Control plane configuration
      controlPlane:
        nodePoolSpec:
          nodes:
          # Control plane node pools. Typically, this is either a single machine
          # or 3 machines if using a high availability deployment.
          - address: 10.200.0.4
          - address: 10.200.0.5
          - address: 10.200.0.6
    
  5. Specifica la densità dei pod dei nodi del cluster e il runtime del container:

    ....
    # NodeConfig specifies the configuration that applies to all nodes in the cluster.
    nodeConfig:
      # podDensity specifies the pod density configuration.
      podDensity:
        # maxPodsPerNode specifies at most how many pods can be run on a single node.
        maxPodsPerNode: 250
      # containerRuntime specifies which container runtime to use for scheduling containers on nodes.
      # containerd and docker are supported.
      containerRuntime: containerd
    ....
    

    Per i cluster di amministrazione, i valori consentiti per maxPodsPerNode sono 32-250 per i cluster ad alta disponibilità e 64-250 per i cluster non ad alta disponibilità. Il valore predefinito se non specificato è 110. Una volta creato il cluster, questo valore non può essere aggiornato.

    Il runtime del container predefinito è containerd. In alternativa, puoi usare Docker. Per ulteriori informazioni sulla modifica del runtime, consulta la guida Modifica del runtime dei container.

    La densità dei pod è limitata anche dalle risorse IP disponibili nel cluster. Per i dettagli, consulta Networking dei pod.

Crea il cluster di amministrazione con la relativa configurazione

Utilizza il comando bmctl per eseguire il deployment del cluster:

bmctl create cluster -c ADMIN_CLUSTER_NAME

ADMIN_CLUSTER_NAME specifica il nome del cluster creato nella sezione precedente.

Di seguito è riportato un esempio del comando per creare un cluster denominato admin1:

bmctl create cluster -c admin1

Esempi di configurazioni di cluster di amministrazione

Ad esempio, per le configurazioni del cluster di amministrazione, vedi Cluster di amministrazione negli esempi di configurazione del cluster.