Crea cluster di amministrazione in una configurazione multi-cluster

In Anthos clusters on bare metal, configuri i cluster di amministrazione per gestire altri cluster in modo sicuro. Puoi creare, aggiornare, eseguire l'upgrade o eliminare i cluster utente dai cluster di amministrazione. I cluster utente eseguono i carichi di lavoro separatamente dall'amministrazione, quindi le informazioni sensibili sono protette.

I cluster di amministrazione che gestiscono carichi di lavoro multi-cluster possono fornire un'affidabilità ad alta disponibilità (HA). In un cluster ad alta disponibilità, se un nodo del piano di controllo ha esito negativo, gli altri nodi continueranno a funzionare.

Un cluster di amministrazione in un ambiente multi-cluster offre la migliore sicurezza di base. Poiché l'accesso ai dati di amministrazione è separato dai carichi di lavoro, chi ha accesso ai carichi di lavoro degli utenti non ha accesso a dati amministrativi sensibili, come le chiavi SSH e i dati degli account di servizio. Ne consegue un compromesso tra sicurezza e risorse necessarie, dato che un cluster di amministrazione separato richiede risorse dedicate per la gestione e i carichi di lavoro.

Puoi creare un cluster di amministrazione utilizzando il comando bmctl. Dopo aver creato un cluster di amministrazione, crei i cluster utente per eseguire i carichi di lavoro.

Prerequisiti:

  • L'ultimo bmctl viene scaricato (gs://anthos-baremetal-release/bmctl/1.13.10/linux-amd64/bmctl) da Cloud Storage.
  • La workstation che esegue bmctl ha connettività di rete a tutti i nodi nei cluster utente di destinazione.
  • La workstation che esegue bmctl ha connettività di rete al server API del cluster (VIP del piano di controllo).
  • La chiave SSH utilizzata per creare il cluster di amministrazione è disponibile per il root o è presente l'accesso utente SUDO su tutti i nodi nel cluster di amministrazione di destinazione.
  • L'account di servizio Connect-register è configurato per l'utilizzo con Connect.

Consulta la guida rapida di Anthos clusters on bare metal per le istruzioni dettagliate per creare un cluster ibrido. La creazione di un cluster di amministrazione è simile alla creazione di un cluster ibrido, tranne per il fatto che non esegui carichi di lavoro sul cluster di amministrazione.

Abilita SELinux

Se vuoi abilitare SELinux per proteggere i tuoi container, devi assicurarti che SELinux sia abilitato in modalità Enforced su tutte le tue macchine host. A partire dalla versione 1.9.0 o successiva di Anthos clusters on bare metal, puoi abilitare o disabilitare SELinux prima o dopo la creazione del cluster o gli upgrade del cluster. SELinux è abilitato per impostazione predefinita su Red Hat Enterprise Linux (RHEL) e CentOS. Se SELinux è disabilitato sulle tue macchine host o hai dubbi, consulta Proteggere i tuoi container usando SELinux per istruzioni su come abilitarlo.

Anthos clusters on bare metal supporta SELinux solo nei sistemi RHEL e CentOS.

Accedi all'interfaccia alla gcloud CLI e crea un file di configurazione del cluster di amministrazione

  1. Imposta le credenziali predefinite che Anthos clusters on bare metal può utilizzare per creare il cluster con il seguente comando:

    gcloud auth application-default login
    
  2. Per utilizzare l'abilitazione automatica delle API e la creazione degli account di servizio in questa pagina, concedi il ruolo Proprietario progetto a questa entità. Se il principal non può avere il ruolo Proprietario progetto, completa il passaggio successivo.

  3. Per garantire che la creazione del cluster abbia esito positivo senza concedere il ruolo Proprietario del progetto, aggiungi i seguenti ruoli IAM all'entità:

    • Amministratore account di servizio
    • Amministratore chiavi account di servizio
    • Amministratore IAM progetto
    • Visualizzatore Compute
    • Amministratore Service Usage

    Se l'entità è un account di servizio con questi ruoli, puoi eseguire:

    export GOOGLE_APPLICATION_CREDENTIALS=JSON_KEY_FILE
    

    Sostituisci JSON_KEY_FILE con il percorso del file della chiave JSON dell'account di servizio.

  4. Recupera l'ID del tuo progetto Google Cloud e archivialo in una variabile di ambiente per utilizzarlo per la creazione del cluster:

    export CLOUD_PROJECT_ID=$(gcloud config get-value project)
    

Crea una configurazione del cluster di amministrazione con bmctl

Dopo aver eseguito l'accesso a gcloud e aver configurato il tuo progetto, puoi creare il file di configurazione del cluster con il comando bmctl.

Nell'esempio seguente, tutti gli account di servizio vengono creati automaticamente tramite il comando bmctl create config:

bmctl create config -c ADMIN_CLUSTER_NAME --enable-apis \
    --create-service-accounts --project-id=CLOUD_PROJECT_ID

Sostituisci quanto segue:

  • ADMIN_CLUSTER_NAME: il nome del nuovo cluster.
  • CLOUD_PROJECT_ID: il tuo ID progetto Google Cloud o la variabile di ambiente $CLOUD_PROJECT_ID.

Di seguito è riportato un esempio per creare un file di configurazione per un cluster di amministrazione denominato admin1 associato all'ID progetto my-gcp-project:

bmctl create config -c admin1 --create-service-accounts --enable-apis --project-id=my-gcp-project

Il file viene scritto in bmctl-workspace/admin1/admin1.yaml.

In alternativa all'attivazione automatica delle API e alla creazione di account di servizio, puoi fornire anche ai tuoi account di servizio esistenti le autorizzazioni IAM appropriate. Ciò significa che puoi saltare la creazione automatica dell'account di servizio nell'esempio precedente nel comando bmctl:

bmctl create config -c admin1

Modifica il file di configurazione del cluster

Ora che hai un file di configurazione del cluster, modificalo per apportare le seguenti modifiche:

  1. Fornisci la chiave privata SSH per accedere ai nodi del cluster di amministrazione:

    # bmctl configuration variables. Because this section is valid YAML but not a valid Kubernetes
    # resource, this section can only be included when using bmctl to
    # create the initial admin/admin cluster. Afterwards, when creating user clusters by directly
    # applying the cluster and node pool resources to the existing cluster, you must remove this
    # section.
    gcrKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-gcr.json
    sshPrivateKeyPath: /path/to/your/ssh_private_key
    gkeConnectAgentServiceAccountKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-connect.json
    gkeConnectRegisterServiceAccountKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-register.json
    cloudOperationsServiceAccountKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-cloud-ops.json
    
  2. Registra i tuoi cluster in un parco risorse. L'ID progetto specificato nel comando bmctl create config viene aggiunto automaticamente al campo gkeConnect.projectID nel file di configurazione del cluster. Questo progetto è denominato progetto host del parco risorse.

    • Se hai creato il file di configurazione, utilizzando l'abilitazione automatica delle API e la creazione dell'account di servizio, puoi saltare questo passaggio.
    • Se hai creato il file di configurazione senza utilizzare l'abilitazione automatica delle API e le funzionalità di creazione dell'account di servizio, fai riferimento alle chiavi JSON dell'account di servizio scaricate nei campi gkeConnectAgentServiceAccountKeyPath e gkeConnectRegisterServiceAccountKeyPath corrispondenti del file di configurazione del cluster.
  3. Verifica che la configurazione specifichi un tipo di cluster admin (il valore predefinito):

    spec:
      # Cluster type. This can be:
      #   1) admin:  to create an admin cluster. This can later be used to create user clusters.
      #   2) user:   to create a user cluster. Requires an existing admin cluster.
      #   3) hybrid: to create a hybrid cluster that runs admin cluster components and user workloads.
      #   4) standalone: to create a cluster that manages itself, runs user workloads, but does not manage other clusters.
      type: admin
    
  4. Modifica il file di configurazione per specificare un piano di controllo con più nodi, ad alta disponibilità. Specifica un numero dispari di nodi per avere un quorum di maggioranza per l'alta disponibilità:

      # Control plane configuration
      controlPlane:
        nodePoolSpec:
          nodes:
          # Control plane node pools. Typically, this is either a single machine
          # or 3 machines if using a high availability deployment.
          - address: 10.200.0.4
          - address: 10.200.0.5
          - address: 10.200.0.6
    
  5. Specifica la densità dei pod dei nodi del cluster:

    ....
    # NodeConfig specifies the configuration that applies to all nodes in the cluster.
    nodeConfig:
      # podDensity specifies the pod density configuration.
      podDensity:
        # maxPodsPerNode specifies at most how many pods can be run on a single node.
        maxPodsPerNode: 250
    ....
    

    Per i cluster di amministrazione, i valori consentiti per maxPodsPerNode sono 32-250 per i cluster ad alta disponibilità e 64-250 per i cluster non ad alta disponibilità. Il valore predefinito se non specificato è 110. Una volta creato il cluster, questo valore non può essere aggiornato.

    La densità dei pod è limitata anche dalle risorse IP disponibili nel tuo cluster. Per maggiori dettagli, consulta Networking dei pod.

Crea il cluster di amministrazione con la configurazione del cluster

Utilizza il comando bmctl per eseguire il deployment del cluster:

bmctl create cluster -c ADMIN_CLUSTER_NAME

ADMIN_CLUSTER_NAME specifica il nome del cluster creato nella sezione precedente.

Di seguito è riportato un esempio del comando per creare un cluster denominato admin1:

bmctl create cluster -c admin1

Esempi di configurazioni di cluster di amministrazione

Ad esempio, per le configurazioni dei cluster di amministrazione, consulta Cluster di amministrazione negli esempi di configurazione dei cluster.