Hybridcluster erstellen

In GKE on Bare Metal haben Hybridcluster die doppelte Rolle eines Administratorclusters und eines Nutzerclusters. Es werden Arbeitslasten ausgeführt und gleichzeitig andere Cluster verwaltet.

Bei Hybridclustern ist es nicht mehr erforderlich, einen separaten Administratorcluster in ressourcenbeschränkten Szenarien auszuführen und eine hohe Verfügbarkeit (HA) zu ermöglichen. Wenn in einem Hybrid-HA-Cluster ein Knoten ausfällt, nehmen andere Knoten seinen Platz ein.

Hybridcluster unterscheiden sich von eigenständigen Clustern darin, dass sie auch andere Cluster verwalten können. Mit eigenständigen Clustern können keine anderen Cluster erstellt oder verwaltet werden.

Wenn Sie Hybridcluster erstellen, müssen allerdings zwischen der Flexibilität und der Sicherheit unterschieden werden. Da sich Hybridcluster selbst verwalten, sind durch das Ausführen von Arbeitslasten im selben Cluster das Sicherheitsrisiko für vertrauliche administrative Daten wie SSH-Schlüssel erhöht.

Mit dem Befehl bmctl erstellen Sie einen Hybridcluster mit einer Hochverfügbarkeitsebene. Der Befehl bmctl kann auf einer separaten Workstation oder auf einem der hybriden Clusterknoten ausgeführt werden.

Vorbereitung

  • Die neueste bmctl wird aus Cloud Storage heruntergeladen (gs://anthos-baremetal-release/bmctl/1.16.8/linux-amd64/bmctl).
  • Die Workstation, auf der bmctl ausgeführt wird, hat eine Netzwerkverbindung zu allen Knoten im Hybrid-Hybridcluster.
  • Die Workstation, auf der bmctl ausgeführt wird, hat eine Netzwerkverbindung zur VIP der Steuerungsebene des Zielhybrid-Clusters.
  • Der SSH-Schlüssel, der zum Erstellen des Hybrid-Clusters verwendet wird, ist für den Root verfügbar, oder es gibt einen SUDO-Nutzerzugriff auf alle Knoten im Ziel-Hybrid-Cluster.
  • Das Connect-Register-Dienstkonto ist für die Verwendung mit Connect konfiguriert.

Eine erweiterte Schritt-für-Schritt-Anleitung zum Erstellen eines Hybridclusters finden Sie in der Kurzanleitung zu GKE on Bare Metal.

SELinux aktivieren

Wenn Sie SELinux zum Schutz Ihrer Container aktivieren möchten, müssen Sie darauf achten, dass SELinux auf allen Hostcomputern im Enforced-Modus aktiviert ist. Ab GKE on Bare Metal-Version 1.9.0 können Sie SELinux vor oder nach der Clustererstellung oder Clusterupgrades aktivieren oder deaktivieren. SELinux ist unter Red Hat Enterprise Linux (RHEL) und CentOS standardmäßig aktiviert. Wenn SELinux auf Ihren Hostcomputern deaktiviert ist oder Sie sich nicht sicher sind, finden Sie unter Container mit SELinux sichern Informationen zur Aktivierung.

GKE on Bare Metal unterstützt SELinux nur in RHEL- und CentOS-Systemen.

Bei gcloud anmelden und eine Konfigurationsdatei für Hybridcluster erstellen

  1. Melden Sie sich mit dem gcloud auth application-default-Log-in als Nutzer bei gcloud an:
  2. gcloud auth application-default login
    
    Sie benötigen die Rolle „Projektinhaber/Editor“, um die unten beschriebenen Funktionen zur automatischen API-Aktivierung und zum Erstellen von Dienstkonten nutzen zu können. Sie können dem Nutzer auch die folgenden IAM-Rollen hinzufügen:
    • Dienstkontoadministrator
    • Zentraler Dienstkontoadministrator
    • Projekt-IAM-Administrator
    • Compute-Betrachter
    • Service Usage-Administrator
    Wenn Sie bereits ein Dienstkonto mit diesen Rollen haben, führen Sie folgenden Befehl aus:
    export GOOGLE_APPLICATION_CREDENTIALS=JSON_KEY_FILE
    
    JSON_KEY_FILE gibt den Pfad zur JSON-Schlüsseldatei des Dienstkontos an.
  3. Rufen Sie Ihre Cloud-Projekt-ID ab, um sie bei der Clustererstellung zu verwenden:
  4. export CLOUD_PROJECT_ID=$(gcloud config get-value project)
    

Erstellen Sie den Hybridcluster mit bmctl

Nachdem Sie sich bei gcloud angemeldet und Ihr Projekt eingerichtet haben, können Sie die Cluster-Konfigurationsdatei mit dem Befehl bmctl erstellen. Beachten Sie, dass in diesem Beispiel alle Dienstkonten automatisch mit dem Befehl bmctl create config erstellt werden:

bmctl create config -c HYBRID_CLUSTER_NAME --enable-apis \
    --create-service-accounts --project-id=CLOUD_PROJECT_ID

Im folgenden Beispiel wird eine Konfigurationsdatei für einen Hybridcluster namens hybrid1 erstellt, der mit der Projekt-ID my-gcp-project verknüpft ist:

bmctl create config -c hybrid1 --create-service-accounts --project-id=my-gcp-project

Die Datei wird in bmctl-workspace/hybrid1/hybrid1.yaml geschrieben.

Als Alternative zur automatischen Aktivierung von APIs und zum Erstellen von Dienstkonten können Sie Ihren vorhandenen Dienstkonten die entsprechenden IAM-Berechtigungen zuweisen. Sie können die automatische Erstellung des Dienstkontos im vorherigen Schritt im Befehl bmctl überspringen:

bmctl create config -c hybrid1

Cluster-Konfigurationsdatei bearbeiten

Da Sie nun eine Clusterkonfigurationsdatei haben, bearbeiten Sie sie, um folgende Änderungen vorzunehmen:

  1. Geben Sie den privaten SSH-Schlüssel an, um auf die hybriden Clusterknoten zugreifen zu können:

    # bmctl configuration variables. Because this section is valid YAML but not a valid Kubernetes
    # resource, this section can only be included when using bmctl to
    # create the initial admin/hybrid cluster. Afterwards, when creating user clusters by directly
    # applying the cluster and node pool resources to the existing cluster, you must remove this
    # section.
    gcrKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-gcr.json
    sshPrivateKeyPath: /path/to/your/ssh_private_key
    gkeConnectAgentServiceAccountKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-connect.json
    gkeConnectRegisterServiceAccountKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-register.json
    cloudOperationsServiceAccountKeyPath: bmctl-workspace/.sa-keys/my-gcp-project-anthos-baremetal-cloud-ops.json
    
  2. Registrieren Sie Ihre Cluster bei einer Flotte. Die im Befehl bmctl create config angegebene Projekt-ID wird automatisch in das Feld gkeConnect.projectID in der Clusterkonfigurationsdatei eingefügt. Dieses Projekt wird als Flotten-Hostprojekt bezeichnet.

    • Wenn Sie Ihre Konfigurationsdatei mithilfe der Features der automatischen API-Aktivierung und der Erstellung von Dienstkonten erstellt haben, können Sie diesen Schritt überspringen.
    • Wenn Sie die Konfigurationsdatei erstellt haben, ohne die Features der automatischen API-Aktivierung und Erstellung von Dienstkonten zu verwenden, verweisen Sie auf die heruntergeladenen JSON-Schlüssel in den entsprechenden Feldern gkeConnectAgentServiceAccountKeyPath und gkeConnectRegisterServiceAccountKeyPath der Cluster-Konfigurationsdatei.
  3. Ändern Sie die Konfiguration, um den Clustertyp hybrid anstelle von admin anzugeben:

    spec:
      # Cluster type. This can be:
      #   1) admin:  to create an admin cluster. This can later be used to create user clusters.
      #   2) user:   to create a user cluster. Requires an existing admin cluster.
      #   3) hybrid: to create a hybrid cluster that runs admin cluster components and user workloads.
      #   4) standalone: to create a cluster that manages itself, runs user workloads, but does not manage other clusters.
      type: hybrid
    
  4. Ändern Sie die Konfiguration, um eine Steuerungsebene mit mehreren Knoten und hoher Verfügbarkeit anzugeben. Sie möchten eine ungerade Anzahl von Knoten angeben, die für ein Großteil des Quorums über HA geeignet sein sollen:

      # Control plane configuration
      controlPlane:
        nodePoolSpec:
          nodes:
          # Control plane node pools. Typically, this is either a single machine
          # or 3 machines if using a high availability deployment.
          - address: 10.200.0.4
          - address: 10.200.0.5
          - address: 10.200.0.6
    
  5. Geben Sie die Pod-Dichte der Clusterknoten an:

    ....
    # NodeConfig specifies the configuration that applies to all nodes in the cluster.
    nodeConfig:
      # podDensity specifies the pod density configuration.
      podDensity:
        # maxPodsPerNode specifies at most how many pods can be run on a single node.
        maxPodsPerNode: 250
    ....
    

    Zulässige Werte für HybridclustermaxPodsPerNode sind32-250 für HA-Cluster und64-250 für Nicht-HA-Cluster. Der Standardwert für maxPodsPerNode, wenn nicht angegeben, ist 110. Sobald der Cluster erstellt ist, kann dieser Wert nicht mehr aktualisiert werden.

    Die Pod-Dichte wird auch durch die verfügbaren IP-Ressourcen des Clusters begrenzt. Weitere Informationen finden Sie unter Pod-Netzwerk.

Hybridcluster mit Clusterkonfiguration erstellen

Verwenden Sie den Befehl bmctl, um den Cluster bereitzustellen:

bmctl create cluster -c CLUSTER_NAME

CLUSTER_NAME gibt den Clusternamen an, den Sie im vorherigen Abschnitt erstellt haben.

Das folgende Beispiel zeigt den Befehl zum Erstellen einer Konfigurationsdatei für einen Cluster namens hybrid1:

bmctl create cluster -c hybrid1

Beispiele für Hybridcluster-Konfigurationen

Beispiele für Hybrid-Clusterkonfigurationen finden Sie unter Hybridcluster in den Beispielen für Clusterkonfigurationen.