Configura credenziali preparate per i cluster utente

Questo documento mostra come configurare le credenziali preparate per i cluster utente in GKE su VMware.

Con le credenziali preparate, puoi archiviare quelle per i cluster utente nei secret del cluster di amministrazione. Questo fornisce un elemento di sicurezza perché non devi tenere le password e le chiavi degli account di servizio sulla workstation di amministrazione durante la creazione dei cluster utente.

Devi preparare in anticipo i secret nel cluster di amministrazione. Quindi, quando crei i cluster utente, puoi specificare che determinate credenziali debbano essere recuperate dai secret preparati nel cluster di amministrazione. Puoi anche utilizzare i secret preparati quando ruoti le credenziali in un cluster utente.

Prima di iniziare

Crea un cluster di amministrazione, se non ne hai già uno.

Panoramica della procedura

  1. Compila un file di configurazione dei secret.

  2. Nel tuo cluster di amministrazione, crea gruppi di secret. Ogni gruppo Secret si trova nel proprio spazio dei nomi Kubernetes.

  3. Creare un cluster utente. Nel file di configurazione del cluster utente, indica che vuoi che le credenziali vengano recuperate dai secret in un determinato spazio dei nomi nel cluster di amministrazione.

  4. Crea gruppi di secret aggiuntivi e versioni aggiuntive dei tuoi secret in base alle esigenze.

  5. Aggiorna le credenziali per un cluster utente esistente in base alle tue esigenze.

  6. Crea cluster utente aggiuntivi in base alle tue esigenze. In ogni file di configurazione del cluster utente, specifica uno spazio dei nomi Secret. Puoi anche specificare la versione di un secret da utilizzare per una determinata credenziale.

Compila il file di configurazione dei secret

Genera un modello per un file di configurazione dei secret:

gkectl create-config secrets

Il comando precedente genera un file denominato secrets.yaml. Se vuoi, puoi modificare il nome e la posizione di questo file.

Acquisisci familiarità con il file di configurazione leggendo il documento File di configurazione dei secret. Ti consigliamo di tenere il documento aperto in una scheda o una finestra separata.

Nel file di configurazione Secrets, inserisci i valori pertinenti per la tua situazione. Devi inserire un valore per namespace che inizia con gke-onprem-secrets-.

Ecco un esempio di file di configurazione dei secret con un gruppo di secret. Il gruppo ha valori per le credenziali vCenter e quattro chiavi dell'account di servizio:

apiVersion: v1
kind: ClusterSecrets
secretGroups:
- namespace: "gke-onprem-secrets-user-cluster-1"
  secrets
    vCenter:
      username: "my-vcenter-account"
      password: "U$icUKEW#INE"
    componentAccessServiceAccount:
      serviceAccountKeyPath: "my-key-folder/component-access-key.json"
    registerServiceAccount:
      serviceAccountKeyPath: "my-key-folder/connect-register-key.json"
    stackdriverServiceAccount:
      serviceAccountKeyPath: "my-key-folder/log-mon-key.json"
    cloudAuditLoggingServiceAccount:
      serviceAccountKeyPath: "my-key-folder/audit-log-key.json"

Crea secret pronti

Crea secret pronti nel tuo cluster di amministrazione:

gkectl prepare secrets --kubeconfig ADMIN_CLUSTER_KUBECONFIG --secret-config SECRETS_CONFIG

Sostituisci quanto segue:

  • ADMIN_CLUSTER_KUBECONFIG: il percorso del file kubeconfig del cluster di amministrazione

  • SECRETS_CONFIG: il percorso del file di configurazione dei secret

Visualizza i secret preparati

Elenca i secret preparati nel cluster di amministrazione:

gkectl list secrets --kubeconfig ADMIN_CLUSTER_KUBECONFIG

Output di esempio:

The following secrets have been found:
- namespace: gke-onprem-secrets-user-cluster-1
  - secrets with name prefix: component-access-sa-creds
    name: component-access-sa-creds.1, version 1, age: 58s
  - secrets with name prefix: cloud-audit-logging-service-account-creds
    name: cloud-audit-logging-service-account-creds.1, version: 1, age: 58s
  - secrets with name prefix: register-service-account-creds
    name: register-service-account-creds.1, version: 1, age: 58s
  - secrets with name prefix: stackdriver-service-account-creds
    name: stackdriver-service-account-creds.1, version: 1, age: 58s
  - secrets with name prefix: vsphere-creds
    name: vsphere-creds.1, version: 1, age: 58s

Puoi anche eseguire kubectl get secrets per elencare i secret in uno spazio dei nomi. Ad esempio:

kubectl --kubeconfig ADMIN_CLUSTER_KUBECONFIG get secrets --namespace gke-onprem-secrets-user-cluster-1

Output di esempio:

component-access-sa-creds ...
cloud-audit-logging-service-account-creds ...
register-service-account-creds.1 ...
stackdriver-service-account-creds.1 ...
vsphere-creds.1 ...

Nell'output precedente, puoi vedere che ogni nome di Secret ha un'estensione che indica la versione del secret. In questo esempio, tutti i secret hanno una versione pari a 1.

Creazione di un cluster utente

Segui le istruzioni in Creare un cluster utente.

Quando compili il file di configurazione del cluster utente, inserisci un valore per preparedSecrets.namespace. Questo valore deve corrispondere a uno spazio dei nomi specificato in precedenza in un file di configurazione Secret.

Esempio:

preparedSecrets:
  namespace: "gke-onprem-secrets-user-cluster-1"

Nel file di configurazione del cluster utente, non specificare valori per i seguenti campi. Questi campi non sono necessari, perché GKE su VMware recupera le credenziali e le chiavi dai secret preparati.

  • vCenter.credentials.fileRef.path
  • componentAccessServiceAccountKeyPath
  • loadBalancer.f5BigIP.credentials.fileRef.path
  • gkeConnect.registerServiceAccountKeyPath
  • stackdriver.serviceAccountKeyPath
  • usageMetering.bigQueryServiceAccountKeyPath
  • cloudAuditLogging.serviceAccountKeyPath
  • privateRegistry.credentials.fileRef.path

Nel file di configurazione del cluster utente, specifica le versioni dei secret preparati che intendi utilizzare. Ecco un esempio che specifica la versione 1 per ognuno dei cinque secret:

vCenter:
  credentials:
    secretRef:
      version "1"
...
componentAccessServiceAccountKey:
  secretRef:
    version: "1"
...
gkeConnect:
  registerServiceAccountKey:
    secretRef:
      version: "1"
...
stackdriver:
  serviceAccountKey:
    secretRef:
      version: "1"
...
cloudAuditLogging:
  serviceAccountKey:
    secretRef:
      version: "1"

Il valore di version deve essere una stringa intera o la stringa "più recente". Se non specifichi un valore per version, viene utilizzata la versione più recente.

Completa la creazione del cluster utente come descritto in Creare un cluster utente.

Crea altri secret pronti

Questa sezione mostra come creare la versione 2 di alcuni secret in uno spazio dei nomi esistente.

Crea un nuovo file di configurazione dei secret denominato secrets-2.yaml. Specifica uno spazio dei nomi esistente e fornisci le credenziali per i secret selezionati.

Esempio:

apiVersion: v1
kind: ClusterSecrets
secretGroups:
- namespace: "gke-onprem-secrets-user-cluster-1"
  secrets:
    stackdriverServiceAccount:
      serviceAccountKeyPath: "log-mon-sa-2.json"
    cloudAuditLoggingServiceAccount:
      serviceAccountKeyPath: "audit-log-sa-2.json"

L'esempio precedente fornisce percorsi delle chiavi per i seguenti secret nello spazio dei nomi gke-onprem-secrets-user-cluster-1.

  • Versione 2 del secret stackdriver-service-account-creds
  • Versione 2 del secret cloud-audit-logging-service-account-creds

Crea i nuovi secret:

gkectl prepare secrets --kubeconfig ADMIN_CLUSTER_KUBECONFIG --secret-config secrets-2.yaml

Elenca i secret preparati nel cluster di amministrazione:

gkectl --kubeconfig ADMIN_CLUSTER_KUBECONFIG list secrets

Output di esempio:

The following secrets have been found:
- namespace: gke-onprem-secrets-user-cluster-1
  - secrets with name prefix: component-access-sa-creds
    name: component-access-sa-creds.1, version 1, age: 11h
  - secrets with name prefix: cloud-audit-logging-service-account-creds
    name: cloud-audit-logging-service-account-creds.1, version: 1, age: 11h
    name: cloud-audit-logging-service-account-creds.2, version: 2, age: 33m
  - secrets with name prefix: register-service-account-creds
    name: register-service-account-creds.1, version: 1, age: 11h
  - secrets with name prefix: stackdriver-service-account-creds
    name: stackdriver-service-account-creds.1, version: 1, age: 11h
    name: stackdriver-service-account-creds.2, version: 2, age: 33m
  - secrets with name prefix: vsphere-creds
    name: vsphere-creds.1, version: 1, age: 11h

Nell'output precedente, puoi vedere che esistono due versioni del secret stackdriver-service-account-creds e due versioni del secret cloud-audit-logging-service-account-creds.

Ruotare le credenziali per un cluster utente

Questa sezione mostra come ruotare le credenziali selezionate per un cluster utente esistente.

Prima di ruotare le credenziali, controlla le versioni attuali di Secret utilizzate nel cluster:

gkectl list secrets cluster --cluster-name USER_CLUSTER_NAME  kubeconfig ADMIN_CLUSTER_KUBECONFIG

Output di esempio:

The following prepared secrets have been used for cluster "user-cluster-1":
- namespace: gke-onprem-secrets-user-cluster-1
  secret: vsphere-creds.1, version: 1
  secret: f5-creds.1, version: 1
  secret: component-access-sa-creds.1, version 1
  secret: register-service-account-creds.1, version: 1
  secret: stackdriver-service-account-creds.1, version: 1
  secret: cloud-audit-logging-service-account-creds.1, version: 1

Copia il file di configurazione del cluster utente in un file denominato user-cluster-update.yaml.

In user-cluster-update.yaml, aggiungi serviceAccountKey sezioni. Ad esempio, l'esempio seguente contiene sezioni serviceAccountKey in stackdriver e cloudAuditLogging:

stackdriver:
  projectID: "my-project-123"
  clusterLocation: "us-central1"
  serviceAccountKey:
    secretRef:
      version: "2"
cloudAuditLogging:
  projectID: "my-project-123"
  clusterLocation: "us-central-1"
  serviceAccountKey:
    secretRef:
      version: "latest"

L'esempio precedente specifica che, quando il cluster utente viene aggiornato, utilizzerà:

  • Versione 2 del secret stackdriver-service-account-creds

  • La versione più recente del secret cloud-audit-logging-service-account-creds. In questo esempio si tratta della versione 2.

Aggiorna le credenziali per il cluster utente:

gkectl update credentials stackdriver --kubeconfig ADMIN_CLUSTER_KUBECONFIG --config user-cluster-2.yaml

gkectl update credentials cloudauditlogging --kubeconfig ADMIN_CLUSTER_KUBECONFIG --config user-cluster-2.yaml

Ora il cluster utente utilizza i seguenti secret preparati:

  • Versione 1 di vsphere-creds
  • Versione 1 di component-access-sa-creds
  • Versione 1 di register-service-account-creds
  • Versione 2 di stackdriver-service-account-creds
  • Versione 2 di cloud-audit-logging-service-account-creds

Crea altri secret e cluster utente

Se prevedi di creare cluster utente aggiuntivi, pensa a come vuoi organizzare i secret preparati. Ti consigliamo di creare uno spazio dei nomi separato nel cluster di amministrazione per ciascun cluster utente. Oppure potresti voler condividere lo stesso spazio dei nomi secret preparato per alcuni o tutti i cluster utente.

Ad esempio, supponiamo che Alice, Bob e Carol abbiano ciascuna un cluster utente. Potresti creare tre gruppi di secret, come mostrato in questo esempio:

apiVersion: v1
kind: ClusterSecrets
secretGroups:
- namespace: "gke-onprem-secrets-alice"
  secrets:
    vCenter:
      username: "alice"
      password: "zC7r^URDPq2t"
    componentAccessServiceAccount:
      serviceAccountKeyPath: "component-access-sa-a.json"
    registerServiceAccount:
      serviceAccountKeyPath: "register-sa-a.json"
    stackdriverServiceAccount:
      serviceAccountKeyPath: "log-mon-sa-a.json"
    cloudAuditLoggingServiceAccount:
      serviceAccountKeyPath: "audit-log-sa-a.json"
- namespace: "gke-onprem-secrets-bob"
  secrets:
    vCenter:
      username: "bob"
      password: "zC8r^URDPq2t"
    componentAccessServiceAccount:
      serviceAccountKeyPath: "component-access-sa-b.json"
    registerServiceAccount:
      serviceAccountKeyPath: "register-sa-b.json"
    stackdriverServiceAccount:
      serviceAccountKeyPath: "log-mon-sa-b.json"
    cloudAuditLoggingServiceAccount:
      serviceAccountKeyPath: "audit-log-sa-b.json"
- namespace: "gke-onprem-secrets-carol"
  secrets:
    vCenter:
      username: "carol"
      password: "zC9r^URDPq2t"
    componentAccessServiceAccount:
      serviceAccountKeyPath: "component-access-sa-c.json"
    registerServiceAccount:
      serviceAccountKeyPath: "register-sa-c.json"
    stackdriverServiceAccount:
      serviceAccountKeyPath: "log-mon-sa-c.json"
    cloudAuditLoggingServiceAccount:
      serviceAccountKeyPath: "audit-log-sa-c.json"

Nel tempo potresti creare versioni aggiuntive dei secret in ogni gruppo di secret.

Nei file di configurazione del cluster utente, fornisci valori per serviceAccountKey.secretRef.version per specificare quali versioni dei tuoi secret vuoi utilizzare. Puoi impostare il valore su "latest", su una stringa vuota o su una stringa intera.

Ad esempio, supponiamo che tutti i tuoi secret abbiano le versioni 1, 2 e 3. Supponiamo che questa sia una parte del file di configurazione del cluster utente per Alice.

apiVersion: v1
kind: UserCluster
name: "user-cluster-alice"
preparedSecrets:
  namespace: "gke-onprem-secrets-alice"
...
vCenter:
  credentials:
gkeConnect:
  projectID: "project-a"
  serviceAccountKey:
    secretRef:
      version: "2"
stackdriver:
  projectID: "project-a"
  clusterLocation: "us-central1"
  serviceAccountKey:
    secretRef:
      version: "latest"
cloudAuditLogging:
  projectID: "project-a"
  clusterLocation: "us-central-1"
  serviceAccountKey:
    secretRef:
      version: ""

Nell'esempio precedente, possiamo vedere:

  • Non è stato specificato alcun secretRef per vCenter, quindi il cluster utilizzerà la versione più recente del secret vsphere-creds nello spazio dei nomi gke-onprem-secrets-alice.

  • Il cluster utilizzerà la versione 2 del secret register-service-account-creds nello spazio dei nomi gke-onprem-secrets-alice.

  • Il cluster utilizzerà la versione più recente del secret stackdriver-service-account-creds nello spazio dei nomi gke-onprem-secrets-alice. In questo esempio si tratta della versione 3.

  • La versione di cloudAuditLogging è la stringa vuota, quindi il cluster utilizzerà la versione più recente del secret cloud-audit-logging-service-account-creds nello spazio dei nomi gke-onprem-secrets-alice. In questo esempio, si tratta della versione 3.

  • Non è specificato alcun secretRef.version per l'account di servizio di accesso ai componenti, quindi il cluster utilizzerà la versione più recente.

Elimina i secret preparati

Per elencare tutti i secret preparati e i relativi spazi dei nomi:

gkectl list secrets --kubeconfig ADMIN_CLUSTER_KUBECONFIG

Se uno spazio dei nomi Secret preparato non viene utilizzato da nessun cluster utente, puoi eliminarlo.

Per eliminare uno spazio dei nomi Secret preparato e tutti i secret al suo interno:

gkectl delete secret –namespace PREPARED_SECRET_NAMESPACE \
    --kubeconfig ADMIN_CLUSTER_KUBECONFIG

Se un singolo secret preparato non viene utilizzato da alcun cluster utente, puoi eliminarlo.

Per eliminare un singolo secret preparato:

gkectl delete secret –namespace PREPARED_SECRET_NAMESPACE \
    --kubeconfig ADMIN_CLUSTER_KUBECONFIG \
    --secret-name SECRET