Crea cluster di amministrazione

In GKE su Bare Metal, devi configurare i cluster di amministrazione per gestire altri cluster in modo sicuro. Puoi creare, aggiornare, eseguire l'upgrade o eliminare i cluster utente dai cluster di amministrazione. I cluster utente eseguono i carichi di lavoro separatamente dall'amministrazione, perciò le informazioni sensibili sono protette.

I cluster di amministrazione che gestiscono carichi di lavoro multi-cluster possono garantire un'affidabilità ad alta disponibilità. In un cluster ad alta disponibilità, se si verifica un errore in un nodo del piano di controllo, gli altri nodi continueranno a funzionare.

Un cluster di amministrazione in un ambiente multi-cluster offre la migliore sicurezza di base. Poiché l'accesso ai dati di amministrazione è separato dai carichi di lavoro, chi accede ai carichi di lavoro degli utenti non ha accesso a dati amministrativi sensibili come le chiavi SSH e i dati degli account di servizio. Di conseguenza, esiste un compromesso tra la sicurezza e le risorse necessarie, poiché un cluster di amministrazione separato significa che hai bisogno di risorse dedicate per la gestione e i carichi di lavoro.

Per creare un cluster di amministrazione, utilizza il comando bmctl. Dopo aver creato un cluster di amministrazione, crei cluster utente per eseguire i carichi di lavoro.

Prerequisiti:

  • L'ultima versione di bmctl è stata scaricata (gs://anthos-baremetal-release/bmctl/1.16.8/linux-amd64/bmctl) da Cloud Storage.
  • La workstation che esegue bmctl ha la connettività di rete a tutti i nodi nei cluster utente di destinazione.
  • La workstation che esegue bmctl dispone di connettività di rete al server API del cluster (VIP del piano di controllo).
  • La chiave SSH utilizzata per creare il cluster di amministrazione è disponibile per il livello root oppure esiste l'accesso utente SUDO su tutti i nodi nel cluster di amministrazione di destinazione.
  • L'account di servizio Connect-Registration è configurato per l'utilizzo con Connect.

Consulta la quickstart di GKE su Bare Metal per istruzioni dettagliate per la creazione di un cluster ibrido. La creazione di un cluster di amministrazione è simile a quella di un cluster ibrido, ad eccezione del fatto che non esegui carichi di lavoro sul cluster di amministrazione.

Abilita SELinux

Per abilitare SELinux per proteggere i container, devi assicurarti che SELinux sia abilitato in modalità Enforced su tutte le macchine host. A partire da GKE su Bare Metal versione 1.9.0 o successive, puoi abilitare o disabilitare SELinux prima o dopo la creazione o l'upgrade del cluster. SELinux è abilitato per impostazione predefinita su Red Hat Enterprise Linux (RHEL) e CentOS. Se SELinux è disabilitato sulle tue macchine host o se non hai la certezza, consulta Protezione dei container con SELinux per istruzioni su come attivarlo.

GKE su Bare Metal supporta SELinux solo nei sistemi RHEL e CentOS.

Accedi a gcloud CLI e crea un file di configurazione del cluster di amministrazione

  1. Imposta le credenziali predefinite che GKE su Bare Metal può utilizzare per creare il cluster con il seguente comando:

    gcloud auth application-default login
    
  2. Per utilizzare le funzionalità di abilitazione automatica delle API e di creazione degli account di servizio in questa pagina, concedi il ruolo Proprietario progetto all'entità. Se l'entità non può avere il ruolo Proprietario progetto, completa il passaggio successivo.

  3. Per assicurarti che la creazione del cluster possa andare a buon fine senza concedere il ruolo Proprietario progetto, aggiungi i seguenti ruoli IAM all'entità:

    • Amministratore account di servizio
    • Amministratore chiavi account di servizio
    • Amministratore IAM progetto
    • Visualizzatore Compute
    • Amministratore Service Usage

    Se l'entità è un account di servizio con questi ruoli, puoi eseguire:

    export GOOGLE_APPLICATION_CREDENTIALS=JSON_KEY_FILE
    

    Sostituisci JSON_KEY_FILE con il percorso del file di chiavi JSON del tuo account di servizio.

  4. Recupera l'ID del tuo progetto Google Cloud e archivialo in una variabile di ambiente per utilizzarlo per la creazione del cluster:

    export CLOUD_PROJECT_ID=$(gcloud config get-value project)
    

Crea una configurazione del cluster di amministrazione con bmctl

Dopo aver eseguito l'accesso a gcloud e aver configurato il progetto, puoi creare il file di configurazione del cluster con il comando bmctl.

Nell'esempio seguente, tutti gli account di servizio vengono creati automaticamente dal comando bmctl create config:

bmctl create config -c ADMIN_CLUSTER_NAME --enable-apis \
    --create-service-accounts --project-id=CLOUD_PROJECT_ID

Sostituisci quanto segue:

  • ADMIN_CLUSTER_NAME: il nome del nuovo cluster.
  • CLOUD_PROJECT_ID: il tuo ID progetto Google Cloud o la variabile di ambiente $CLOUD_PROJECT_ID.

Ecco un esempio per creare un file di configurazione per un cluster di amministrazione denominato admin1 associato all'ID progetto my-gcp-project:

bmctl create config -c admin1 --create-service-accounts --enable-apis --project-id=my-gcp-project

Il file è scritto in bmctl-workspace/admin1/admin1.yaml.

In alternativa all'abilitazione automatica delle API e alla creazione di account di servizio, puoi anche fornire agli account di servizio esistenti le autorizzazioni IAM appropriate. Ciò significa che puoi saltare la creazione automatica degli account di servizio nell'esempio precedente nel comando bmctl:

bmctl create config -c admin1 --project-id=my-gcp-project

Modifica il file di configurazione del cluster

Ora che hai un file di configurazione del cluster, modificalo per apportare le seguenti modifiche:

  1. Fornisci la chiave privata SSH per accedere ai nodi del cluster di amministrazione:

    # bmctl configuration variables. Because this section is valid YAML but not a valid Kubernetes
    # resource, this section can only be included when using bmctl to
    # create the initial admin/admin cluster. Afterwards, when creating user clusters by directly
    # applying the cluster and node pool resources to the existing cluster, you must remove this
    # section.
    gcrKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-gcr.json
    sshPrivateKeyPath: /path/to/your/ssh_private_key
    gkeConnectAgentServiceAccountKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-connect.json
    gkeConnectRegisterServiceAccountKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-register.json
    cloudOperationsServiceAccountKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-cloud-ops.json
    
  2. Registra i cluster in un parco risorse. L'ID progetto specificato nel comando bmctl create config viene aggiunto automaticamente al campo gkeConnect.projectID del file di configurazione del cluster. Questo progetto è definito progetto host del parco risorse.

    • Se hai creato il file di configurazione utilizzando le funzionalità di abilitazione automatica delle API e di creazione dell'account di servizio, puoi saltare questo passaggio.
    • Se hai creato il file di configurazione senza utilizzare le funzionalità di abilitazione automatica delle API e di creazione dell'account di servizio, fai riferimento alle chiavi JSON dell'account di servizio scaricate nei campi gkeConnectAgentServiceAccountKeyPath e gkeConnectRegisterServiceAccountKeyPath corrispondenti del file di configurazione del cluster.
  3. Assicurati che la configurazione specifichi un tipo di cluster admin (il valore predefinito):

    spec:
      # Cluster type. This can be:
      #   1) admin:  to create an admin cluster. This can later be used to create user clusters.
      #   2) user:   to create a user cluster. Requires an existing admin cluster.
      #   3) hybrid: to create a hybrid cluster that runs admin cluster components and user workloads.
      #   4) standalone: to create a cluster that manages itself, runs user workloads, but does not manage other clusters.
      type: admin
    
  4. Nella versione 1.16 e successive, se l'API GKE On-Prem è abilitata nel tuo progetto Google Cloud, tutti i cluster che lo compongono vengono registrati automaticamente nell'API GKE On-Prem nella regione configurata in clusterOperations.location.

    • Se vuoi registrare tutti i cluster del progetto nell'API GKE On-Prem, assicurati di seguire i passaggi descritti in Prima di iniziare per attivare e utilizzare l'API GKE On-Prem nel progetto.

    • Se non vuoi registrare il cluster nell'API GKE On-Prem, includi questa sezione e imposta gkeOnPremAPI.enabled su false. Se non vuoi registrare alcun cluster nel progetto, disabilita gkeonprem.googleapis.com (il nome del servizio per l'API GKE On-Prem) nel progetto. Per le istruzioni, consulta Disabilitazione dei servizi.

  5. Modifica il file di configurazione per specificare un piano di controllo con più nodi e ad alta disponibilità. Specifica un numero dispari di nodi per avere un quorum di maggioranza per l'alta disponibilità:

      # Control plane configuration
      controlPlane:
        nodePoolSpec:
          nodes:
          # Control plane node pools. Typically, this is either a single machine
          # or 3 machines if using a high availability deployment.
          - address: 10.200.0.4
          - address: 10.200.0.5
          - address: 10.200.0.6
    
  6. Specifica la densità dei pod dei nodi del cluster:

    ....
    # NodeConfig specifies the configuration that applies to all nodes in the cluster.
    nodeConfig:
      # podDensity specifies the pod density configuration.
      podDensity:
        # maxPodsPerNode specifies at most how many pods can be run on a single node.
        maxPodsPerNode: 250
    ....
    

    Per i cluster di amministrazione, i valori consentiti per maxPodsPerNode sono 32-250 per i cluster ad alta disponibilità e 64-250 per i cluster non ad alta disponibilità. Il valore predefinito se non specificato è 110. Una volta creato il cluster, questo valore non può essere aggiornato.

    La densità dei pod è limitata anche dalle risorse IP disponibili del cluster. Per maggiori dettagli, consulta la pagina Networking dei pod.

Crea il cluster di amministrazione con la configurazione del cluster

Utilizza il comando bmctl per eseguire il deployment del cluster:

bmctl create cluster -c ADMIN_CLUSTER_NAME

ADMIN_CLUSTER_NAME specifica il nome del cluster creato nella sezione precedente.

Di seguito è riportato un esempio del comando per creare un cluster denominato admin1:

bmctl create cluster -c admin1

Esempi di configurazioni dei cluster di amministrazione

Per esempi di configurazioni dei cluster di amministrazione, consulta Cluster di amministrazione negli esempi di configurazione dei cluster.