Obtenir de l'aide

L'objectif principal de Google est de résoudre les incidents de production le plus rapidement possible. La compréhension de votre configuration, l'analyse des journaux et des métriques et la collaboration avec des partenaires nous aident à résoudre rapidement les incidents.

Google Cloud propose plusieurs formules d'assistance adaptées à vos besoins. Toutes les formules d'assistance Google Cloud sont compatibles avec Google Kubernetes Engine (GKE) édition Enterprise et GKE sur Bare Metal. Si vous disposez d'une formule d'assistance Google Cloud, vous bénéficiez déjà de l'assistance pour GKE Enterprise et GKE sur Bare Metal.

Pour en savoir plus, consultez la documentation de l'assistance Google Cloud.

Conditions requises pour l'assistance GKE sur une solution Bare Metal

Pour résoudre efficacement les incidents critiques, vous devez effectuer les actions suivantes :

Outils d'assistance

Pour résoudre un incident lié à GKE sur Bare Metal, l'assistance Google Cloud s'appuie sur trois éléments d'information:

Configuration de votre environnement

Lorsque vous ouvrez une demande d'assistance, l'exécution des commandes suivantes fournit des informations clés sur la configuration de votre cluster :

  • Pour tous vos types de clusters, exécutez la commande bmctl check cluster --snapshot pour capturer des informations sur Kubernetes et vos nœuds. Joignez le fichier tar obtenu à la demande d'assistance.

  • Pour les clusters d'administrateur, hybrides et autonomes, exécutez la commande bmctl check cluster pour vérifier l'état du cluster et des nœuds. Joignez les journaux des résultats à la demande d'assistance. Ils doivent se trouver dans le répertoire bmctl-workspace/[CLUSTER_NAME]/log/check-cluster-[TIMESTAMP].

  • Pour les clusters d'utilisateur, commencez par créer un fichier YAML de vérification de l'état avec le nom du cluster et l'espace de noms, puis appliquez le fichier dans le cluster d'administrateur approprié:

    1. Créez un fichier YAML avec les propriétés healthcheck suivantes : Voici un exemple de contenu pour un cluster nommé user1 dans l'espace de noms cluster-user1:

      apiVersion: baremetal.cluster.gke.io/v1
      kind: HealthCheck
      metadata:
        generateName: healthcheck-
        namespace: cluster-user1
      spec:
        clusterName: user1
      
    2. Après avoir créé le fichier YAML, appliquez la ressource personnalisée dans le cluster d'administrateur qui gère le cluster d'utilisateur à l'aide de la commande kubectl. Voici un exemple de commande utilisant le fichier YAML créé à l'étape précédente. Dans l'exemple, la variable ADMIN_KUBECONFIG spécifie le chemin d'accès au fichier kubeconfig du cluster d'administrateur:

      kubectl --kubeconfig ADMIN_KUBECONFIG create -f healthcheck-user1.yaml
      

      La commande renvoie la réponse suivante :

      healthcheck.baremetal.cluster.gke.io/healthcheck-7c4qf created
      
    3. Attendez que la tâche de vérification de l'état soit terminée en effectuant un test pour vérifier si la tâche de vérification de l'état est terminée. Dans l'exemple précédent, le nom de la tâche de vérification de l'état est healthcheck.baremetal.cluster.gke.io/healthcheck-7c4qf. Voici un exemple de test avec la commande kubectl, qui attend 30 minutes que la tâche de vérification de l'état;état se termine:

      kubectl --kubeconfig ADMIN_KUBECONFIG wait healthcheck healthcheck-7c4qf \
          -n cluster-user1 --for=condition=Reconciling=False --timeout=30m
      

      Une fois l'opération terminée, cette commande renvoie le résultat suivant :

      healthcheck.baremetal.cluster.gke.io/healthcheck-7c4qf condition met
      

      Vous pouvez afficher les résultats de la vérification de l'état à l'aide de la commande suivante :

      kubectl --kubeconfig ADMIN_KUBECONFIG get healthcheck healthcheck-7c4qf \
          -n cluster-user1
      

      La commande renvoie le résultat suivant :

      NAME                PASS   AGE
      healthcheck-7c4qf   true   17m
      
    4. Rassemblez tous les journaux des pods de la tâche de vérification de l'état dans un fichier local à l'aide de la commande kubectl. Voici un exemple utilisant la tâche précédente de vérification de l'état :

      kubectl --kubeconfig ADMIN_KUBECONFIG logs -n cluster-user1 \
          -l baremetal.cluster.gke.io/check-name=healthcheck-7c4qf --tail=-1 > \
          healthcheck-7c4qf.log
      

Journaux de cluster

Lorsque vous créez un cluster GKE sur Bare Metal, les agents Cloud Logging sont activés par défaut et ne concernent que les composants au niveau du système. Cette opération permet de répliquer les journaux système dans le projet Google Cloud associé au cluster. Les journaux au niveau du système proviennent de pods Kubernetes hébergés dans les espaces de noms suivants:

  • kube-system
  • gke-system
  • gke-connect
  • istio-system
  • config-management-system
  • gatekeeper-system
  • cnrm-system
  • knative-serving

Vous pouvez interroger les journaux à partir de la console Cloud Logging.

Pour en savoir plus, consultez la page Logging et Monitoring.

Google Cloud CLI et accès distant au cluster

Si vous ouvrez une demande d'assistance, le Cloud Customer Care peut vous demander un accès en lecture seule à distance à vos clusters afin de diagnostiquer et de résoudre les problèmes plus efficacement. Pour que l'équipe d'assistance dispose d'un accès suffisant pour résoudre à distance le problème de votre cluster, assurez-vous d'avoir installé et mis à jour la dernière version de la Google Cloud CLI. La Google Cloud CLI doit être à la version 401.0.0 ou ultérieure pour accorder au Cloud Customer Care les autorisations nécessaires. Nous vous recommandons de mettre à jour régulièrement Google Cloud CLI afin de bénéficier des autorisations ajoutées et d'autres améliorations.

Pour installer les derniers composants de la gcloud CLI, utilisez la commande gcloud components update. Pour en savoir plus sur l'octroi d'un accès à distance en lecture seule à vos clusters Cloud Customer Care, consultez la page Assistance Google Cloud pour vos clusters enregistrés.

Métriques de cluster

En plus des journaux, l'agent Cloud Monitoring capture également les métriques. Cette opération réplique les métriques au niveau du système dans le projet Google Cloud associé au cluster. Les métriques au niveau du système proviennent de pods Kubernetes exécutés dans les mêmes espaces de noms que ceux répertoriés dans les journaux.

Pour en savoir plus, consultez la page Logging et Monitoring.

Comment nous dépannons votre environnement

Voici un exemple type d'incident nécessitant une assistance :

  1. L'administrateur du cluster ouvre une demande d'assistance dans la console Google Cloud ou dans le centre d'assistance Google Cloud, puis sélectionne Google Kubernetes Engine (GKE) édition Enterprise et GKE sur Bare Metal comme catégorie et composant, respectivement. Ils saisissent les informations requises et joignent le résultat des commandes bmctl pertinentes au cas.

  2. La demande d'assistance est transmise à un ingénieur d'assistance technique spécialisé dans GKE sur Bare Metal.

  3. L'ingénieur d'assistance examine le contenu de l'instantané pour connaître le contexte de l'environnement.

  4. L'ingénieur d'assistance examine les journaux et les métriques du projet Google Cloud, en saisissant le numéro de la demande d'assistance comme justification de l'entreprise, laquelle est consignée en interne.

  5. L'ingénieur d'assistance répond à la demande par une évaluation et une recommandation. L'ingénieur d'assistance et l'utilisateur continuent de tenter de résoudre le problème jusqu'à ce qu'ils trouvent une solution.

Quelles sont les fonctionnalités acceptées par Google ?

En règle générale, l'équipe d'assistance Cloud prend en charge tous les composants logiciels fournis dans le cadre de GKE sur Bare Metal et d'Anthos Service Mesh, Policy Controller, Config Sync et Config Controller. Consultez le tableau suivant pour obtenir une liste plus complète des éléments compatibles et non compatibles :

Compatibilité Google Cloud Non compatible
Kubernetes et l'environnement d'exécution des conteneurs Choix de l'équilibreur de charge (équilibrage de charge manuel) par le client
Connexion et l'agent Connect Code client (voir Assistance aux développeurs)
Opérations Google Cloud, Monitoring, Logging et agents Choix du système d'exploitation par le client
Équilibreur de charge groupé Serveur physique ou virtuel, stockage et réseau
Contrôleur d'entrée Systèmes externes de DNS, de DHCP et de gestion des identités
Service d'identité GKE
Anthos Service Mesh
Policy Controller
Config Sync
Config Controller

Politique de compatibilité avec les versions

L'assistance pour GKE sur Bare Metal respecte la politique de compatibilité des versions de Google Kubernetes Engine (GKE) Enterprise. À partir de la version 1.14 de Google Kubernetes Engine (GKE) Enterprise, Google prend en charge chaque version mineure de GKE sur Bare Metal pendant 12 mois après la publication initiale de la version mineure, ou jusqu'à la publication de la troisième version mineure ultérieure, si la durée est plus longue.

Le tableau suivant indique les versions compatibles et non compatibles de ce produit.

Version mineure Date de disponibilité Date de fin de vie la plus proche Correctifs disponibles Version de Kubernetes
1.28 (dernière version) 15 décembre 2023 15 décembre 2024 1.28.400-gke.77 v1.28.7-gke.1700
1.28.300-gke.131 v1.28.7-gke.1700
1.28.200-gke.118 v1.28.5-gke.1200
1.28.100-gke.146 v1.28.5-gke.1200
1.28.0-gke.435 v1.28.3-gke.700
1,16 15 août 2023 25 août 2024 1.16.8 version 1.27.12-gke.800
1.16.7 version 1.27.10-gke.500
1.16.6 v1.27.9-gke.1200
1.16.5 v1.27.8-gke.1500
1.16.4 version 1.27.7-gke.1400
1.16.3 v1.27.6-gke.2500
1.16.2 v1.27.4-gke.1600
1.16.1 v1.27.4-gke.1600
1.16.0 v1.27.4-gke.1600
1,15 27 avril 2023 27 avril 2024 1.15.11 version 1.26.13-gke.1100
1.15.10 version 1.26.13-gke.400
1.15.9 version 1.26.12-gke.1200
1.15.8 version 1.26.10-gke.1400
1.15.7 v1.26.9-gke.2400
1.15.6 v1.26.8-gke.200
1.15.5 v1.26.8-gke.200
1.15.4 v1.26.5-gke.2100
1.15.3 v1.26.5-gke.2100
1.15.2 v1.26.5-gke.1200
1.15.1 v1.26.2-gke.1001
1.15.0 v1.26.2-gke.1001
1.14 (non compatible) 8 décembre 2022 8 Décembre 2023 1.14.11 version 1.25.14-gke.2400
1.14.10 version 1.25.14-gke.2400
1.14.9 version 1.25.13-gke.200
1.14.8 version 1.25.10-gke.2100
1.14.7 version 1.25.10-gke.2100
1.14.6 version 1.25.10-gke.1200
1.14.5 v1.25.7-gke.1000
1.14.4 v1.25.7-gke.1000
1.14.3 v1.25.6-gke.1000
1.14.2 v1.25.5-gke.1001
1.14.1 v1.25.5-gke.1001
1.14.0 v1.25.3-gke.1400
1.13 (non compatible) 29 septembre 2022 17 août 2023 1.13.10 version 1.24.14-gke.2100
1.13.9 version 1.24.14-gke.1200
1.13.8 version 1.24.11-gke.1000
1.13.7 version 1.24.11-gke.1000
1.13.6 v1.24.9-gke.2500
1.13.5 v1.24.9-gke.2500
1.13.4 v1.24.9-gke.2500
1.13.3 version 1.24.7-gke.1700
1.13.2 v1.24.7-gke.300
1.13.1 v1.24.5-gke.400
1.13.0 v1.24.2-gke.1900
1.12 (non compatible) 29 juin 2022 29 mars 2023 1.12.9 version 1.23.17-gke.300
1.12.8 version 1.23.16-gke.100
1.12.7 version 1.23.15-gke.2400
1.12.6 version 1.23.13-gke.1700
1.12.5 version 1.23.13-gke.1700
1.12.4 v1.23.11-gke.500
1.12.3 v1.23.10-gke.1000
1.12.2 v1.23.5-gke.1505
1.12.1 v1.23.5-gke.1505
1.12.0 v1.23.5-gke.1504
1.11 (non compatible) 21 mars 2022 21 décembre 2022 1.11.8 v1.22.15-gke.3300
1.11.7 v1.22.14-gke.500
1.11.6 v1.22.8-gke.204
1.11.5 v1.22.8-gke.204
1.11.4 v1.22.8-gke.204
1.11.3 v1.22.8-gke.203
1.11.2 v1.22.8-gke.200
1.11.1 v1.22.8-gke.200
1.11.0 v1.22.8-gke.200
1.10 (non compatible) 10 décembre 2021 10 septembre 2022 1.10.8 v1.21.13-gke.202
1.10.7 v1.21.13-gke.202
1.10.6 v1.21.13-gke.201
1.10.5 v1.21.6-gke.1503
1.10.4 v1.21.6-gke.1503
1.10.3 v1.21.5-gke.1300
1.10.2 v1.21.5-gke.1300
1.10.1 v1.21.5-gke.1200
1.10.0 v1.21.5-gke.1200
1.9 (non compatible) 23 septembre 2021 23 juin 2022 1.9.8 v1.21.13-gke.200
1.9.7 v1.21.6-gke.1503
1.9.6 v1.21.5-gke.1300
1.9.5 v1.21.5-gke.1300
1.9.4 v1.21.5-gke.1200
1.9.3 v1.21.5-gke.1200
1.9.2 v1.21.4-gke.201
1.9.1 v1.21.4-gke.201
1.9.0 v1.21.4-gke.200
1.8 (non compatible) 21 juin 2021 21 mars 2022 1.8.9 v1.20.9-gke.102
1.8.8 v1.20.9-gke.102
1.8.7 v1.20.9-gke.102
1.8.6 v1.20.9-gke.102
1.8.5 v1.20.9-gke.102
1.8.4 v1.20.9-gke.101
1.8.3 v1.20.9-gke.101
1.8.2 v1.20.8-gke.1500
1.8.1 v1.20.5-gke.1301
1.8.0 v1.20.5-gke.1301
1.7 (non compatible) 25 mars 2021 25 décembre 2021 1.7.7 v1.19.14-gke.2201
1.7.6 v1.19.14-gke.2201
1.7.5 v1.19.14-gke.2201
1.7.4 v1.19.14-gke.400
1.7.3 v1.19.13-gke.100
1.7.2 v1.19.10-gke.1602
1.7.1 v1.19.7-gke.1200
1.7.0 v1.19.7-gke.1200
1.6 (non compatible) 30 novembre 2020 30 août 2021 1.6.4 v1.18.20-gke.3000
1.6.3 v1.18.18-gke.100
1.6.2 v1.18.6-gke.6600
1.6.1 v1.18.6-gke.6600
1.6.0 v1.18.6-gke.6600

Fonctionnalités compatibles

Ce document liste la disponibilité des fonctionnalités de GKE sur Bare Metal pour les versions compatibles. Cette table n'est pas exhaustive, mais elle met en évidence certains des avantages de la mise à niveau de vos clusters vers la dernière version compatible.

Les fonctionnalités listées en version preview sont couvertes par les Conditions des offres de pré-DG des conditions d'utilisation de Google Cloud. La compatibilité des fonctionnalités et produits pré-DG peut être limitée, et les modifications apportées à ces fonctionnalités et produits peuvent ne pas être compatibles avec d'autres versions pré-DG. Pour en savoir plus, consultez les descriptions des étapes de lancement. Les versions preview sont destinées à être utilisées dans des environnements de test uniquement.

Les fonctionnalités listées comme en disponibilité générale sont entièrement compatibles, ouvertes à tous les clients et prêtes à être utilisées en production.

Fonctionnalité 1.15 (non compatible) 1.16 1.28 1.29 (dernière version)
Clusters d'administrateur compatibles avec plusieurs versions de clusters d'utilisateur - - - Aperçu
Règles d'alerte Aperçu Aperçu Aperçu Aperçu
Environnement d'exécution des VM sur Google Distributed Cloud GA GA GA GA
Groupes Azure Active Directory (AD) GA GA GA GA
Compatibilité de l'équilibreur de charge basé sur BGP pour IPv6 GA GA GA GA
Autorisation binaire Aperçu GA GA GA
Équilibrage de charge groupé avec BGP GA GA GA GA
Cloud Audit Logging GA GA GA GA
Compatibilité avec la CLI de restauration de sauvegarde de cluster GA GA GA GA
Rotation des autorités de certification de cluster GA GA GA GA
Compatibilité avec la CLI de réinitialisation des nœuds de cluster GA GA GA GA
Suspendre et reprendre la mise à niveau du cluster - - Aperçu Aperçu
Environnement d'exécution du conteneur containerd GA GA GA GA
Groupe de contrôle v2 GA GA GA GA
Autorités de certification personnalisées - Aperçu GA GA
Mode de transfert de l'équilibrage de charge Dataplane V2 (Direct Server Return) - Aperçu GA GA
Adresse IP plate dynamique avec le protocole BGP (Border Gateway Protocol) GA GA GA GA
Passerelle NAT de sortie GA GA GA GA
Mode IPv4 plat (statique) GA GA GA GA
Compatibilité IPv6 plate (mode BGP) GA GA GA GA
GKE Identity Service v2 - - Aperçu GA
Double pile IPv4/IPv6 GA GA GA GA
Compatibilité KSA GA GA GA GA
Collecteur géré pour Google Cloud Managed Service pour Prometheus GA GA GA GA
Connectivité multicluster Aperçu Aperçu Aperçu Aperçu
Plusieurs cartes d'interface réseau pour les pods GA GA GA GA
Passerelle réseau pour GDC Aperçu Aperçu Aperçu Aperçu
Détecteur de problème de nœud GA GA GA GA
Mises à niveau de nœuds parallèles GA GA GA GA
Mises à niveau des pools de nœuds en parallèle Aperçu GA GA GA
Opérateur de réglage des performances - Aperçu Aperçu Aperçu
Compatibilité des registres privés avec les nœuds - - - Aperçu
Compatibilité avec les miroirs de registres GA GA GA GA
Mode informatique sécurisé (seccomp) GA GA GA GA
Ignorer la mise à niveau de la version du pool de nœuds - - Aperçu GA
Mise en réseau SR-IOV GA GA GA GA
Métriques récapitulatives de l'API GA GA GA GA
VPC Service Controls Aperçu GA GA GA
Rollback de la mise à niveau du pool de nœuds de calcul - - - Aperçu
Workload Identity GA GA GA GA

Modèle de responsabilité partagée

Pour exécuter une application de production critique sur GKE sur une solution Bare Metal, plusieurs parties doivent assumer des responsabilités différentes. Bien que cette liste ne soit pas exhaustive, les sections suivantes répertorient les rôles et les responsabilités.

Responsabilités de Google

  • Maintenance et distribution du package logiciel GKE sur Bare Metal
  • Informer les utilisateurs des mises à niveau disponibles pour GKE sur Bare Metal et produire des scripts de mise à niveau pour la version précédente. GKE sur Bare Metal n'accepte que les mises à niveau séquentielles (par exemple: 1.2 → 1.3 → 1.4, et non 1.2 → 1.4).
  • Opération des services Connect et Cloud Operations
  • Résolution des problèmes, solutions palliatives et correction de la cause principale des problèmes liés aux composants fournis par Google.

Responsabilités des utilisateurs

  • Administration globale du système pour les clusters sur site
  • Gestion de toute charge de travail d'application déployée sur le cluster
  • Exécuter, gérer et corriger l'infrastructure du centre de données, y compris la mise en réseau, les serveurs, le système d'exploitation, le stockage et la connectivité à Google Cloud
  • Exécution, gestion et correction des équilibreurs de charge réseau si l'option d'équilibrage de charge manuel est choisie
  • Mettre à niveau régulièrement des versions de GKE sur Bare Metal
  • Surveillance du cluster et des applications et réponse aux incidents éventuels
  • Déploiement des agents Cloud Operations dans les clusters
  • Partage avec Google des informations concernant l'environnement à des fins de dépannage

Assistance aux développeurs

Google ne fournit pas d'assistance spécifique pour les charges de travail de vos applications. Toutefois, nous soutenons au mieux les développeurs afin qu'ils puissent exécuter des applications sur GKE sur une solution Bare Metal. Nous pensons qu'une participation précoce du développement peut éviter des incidents critiques ultérieurs au cours du déploiement.

Cette assistance aux développeurs, du mieux possible, est disponible pour les clients disposant de n'importe quelle formule d'assistance payante. Elle est traitée comme une priorité P3 pour un problème bloquant un lancement, ou une priorité P4 pour une consultation générale. Dans cette classification, le niveau de priorité 0 est la priorité la plus élevée.