Résoudre les problèmes d'observabilité et de télémétrie dans Cloud Service Mesh

Cette section décrit les problèmes courants liés à Cloud Service Mesh et explique comment les résoudre de l'IA générative. Si vous avez besoin d'une aide supplémentaire, consultez la page Obtenir de l'aide.

Dans la télémétrie Cloud Service Mesh, les proxys Envoy appellent la méthode les API Google Cloud Observability afin de créer régulièrement des rapports sur les données de télémétrie. Le type L'appel d'API détermine sa fréquence:

• Journalisation : environ toutes les 10 secondes
• Métriques : environ toutes les minutes
• Edges (API Context/Vue de la topologie): rapports incrémentiels toutes les ~1 minute, avec des rapports complets toutes les 10 minutes environ.
• Traces: déterminées par la fréquence d'échantillonnage que vous configurez (généralement une sur 100 requêtes).

Important : La télémétrie complète peut être différée d'une à deux minutes pendant le démarrage des clusters.

Les tableaux de bord de télémétrie collectent des données provenant à la fois de Confluence et Google Cloud Observability pour afficher les différents tableaux de bord axés sur les services.

Vérifier qu'il existe au maximum une configuration d'API de télémétrie d'Istio

Cette section ne s'applique qu'au plan de contrôle Cloud Service Mesh géré.

Remarque :Cloud Service Mesh avec un plan de contrôle Cloud Service Mesh géré uniquement est compatible avec une configuration d'API de télémétrie à l'échelle du cluster. RS de l'API de télémétrie d'Istio dans l'espace de noms racine. Ne pas déployer plusieurs services Istio de l'API Telemetry dans un cluster. Si vous déployez plusieurs API de télémétrie Istio dans un cluster, seule la première prend effet. Si vous disposez déjà d'une RS pour l'API de télémétrie d'Istio, afin de préserver votre les paramètres de personnalisation précédents dans votre RS de télémétrie Istio existante, vous vous devez les inclure dans la nouvelle RS de l'API de télémétrie d'Istio.

Pour répertorier les configurations de l'API de télémétrie, exécutez la commande suivante. Vérifiez que il n'y a pas plus d'une configuration de l'API de télémétrie d'Istio.

kubectl -n istio-system get telemetry

Service manquant dans le tableau de bord des services

Le tableau de bord n'affiche que les services HTTP(S)/gRPC. Si votre service doit être en vérifiez que la télémétrie Cloud Service Mesh l'identifie comme Google Cloud.

Si votre service n'est toujours pas disponible, vérifiez qu'un Configuration de service Kubernetes dans votre cluster.

• Consultez la liste de tous les services Kubernetes :

  kubectl get services --all-namespaces

• Consultez la liste des services Kubernetes dans un espace de noms spécifique :

  kubectl get services -n YOUR_NAMESPACE

Métriques manquantes ou incorrectes pour les services

S'il y a des métriques manquantes ou incorrectes pour les services dans le tableau de bord des services, consultez les sections suivantes pour connaître les solutions potentielles.

Vérifier que les proxys side-car existent et ont été injectés correctement

Remarque :Vous devez avoir accès au cluster pour résoudre les problèmes d'éléments manquants ou incorrects métriques.

Il est possible que l'espace de noms n'ait pas de libellé pour l'injection automatique ou que l'injection manuelle ait échoué. Vérifiez que les pods de l'espace de noms ont atteint au moins deux conteneurs et que l'un d'entre eux est le proxy conteneur:

kubectl -n YOUR_NAMESPACE get pods

Vérifier que la configuration de la télémétrie existe

Pour vérifier que le filtre d'observabilité Google Cloud est configuré, un vidage de configuration à partir de chaque proxy et à rechercher la présence du Filtre d'observabilité Google Cloud:

kubectl debug --image istio/base --target istio-proxy -it YOUR_POD_NAME -n YOUR_NAMESPACE curl localhost:15000/config_dump

Dans le résultat de la commande précédente, recherchez le filtre d'observabilité Google Cloud, qui se présente comme suit:

"config": {
    "root_id": "stackdriver_inbound",
    "vm_config": {
        "vm_id": "stackdriver_inbound",
        "runtime": "envoy.wasm.runtime.null",
        "code": {
            "local": {
                "inline_string": "envoy.wasm.null.stackdriver"
             }
         }
     },
     "configuration": "{....}"
}

Vérifier que Cloud Service Mesh identifie un service HTTP

Les métriques ne s'affichent pas dans l'interface utilisateur si le port de service Le service Kubernetes ne porte pas le nom http ni aucun nom comportant le préfixe http-. Vérifiez que le service possède les noms corrects pour ses ports.

Vérifier que l'API Cloud Monitoring est activée pour le projet

Vérifiez que l'API Cloud Monitoring est activée dans le tableau de bord "API et services" de Google Cloud Console, ce qui est la valeur par défaut.

Vérifier qu'aucune erreur n'est signalée à l'API Cloud Monitoring

Dans l'API de la console Google Cloud dans le tableau de bord des services, URL du graphique Trafic par code de réponse:

https://console.cloud.google.com/apis/api/monitoring.googleapis.com/metrics?folder=&organizationId=&project=YOUR_PROJECT_ID

Si des messages d'erreur s'affichent, un examen plus approfondi peut être nécessaire. Par exemple, recherchez un grand nombre de messages d'erreur 429, ce qui indique un problème potentiel de quota. Consultez la section suivante pour connaître les étapes de dépannage.

Vérifier le quota correct pour l'API Cloud Monitoring

Dans la console Google Cloud, ouvrez le menu IAM & Admin et vérifiez qu'un Quotas . Vous pouvez accéder à cette page directement à l'aide de l'URL :

https://console.cloud.google.com/iam-admin/quotas?project=YOUR_PROJECT_ID

Cette page présente l'ensemble complet des quotas du projet, où vous pouvez rechercher Cloud Monitoring API.

Vérifier qu'aucun journal d'erreurs n'apparaît dans les proxys Envoy

Examinez les journaux du proxy en question pour rechercher les instances de message d'erreur :

kubectl -n YOUR_NAMESPACE logs YOUR_POD_NAME -c istio-proxy

Vous pouvez toutefois ignorer les messages d'avertissement suivants, qui sont normaux :

[warning][filter] [src/envoy/http/authn/http_filter_factory.cc:83]
mTLS PERMISSIVE mode is used, connection can be either plaintext or TLS,
and client cert can be omitted. Please consider to upgrade to mTLS STRICT mode
for more secure configuration that only allows TLS connection with client cert.
See https://istio.io/docs/tasks/security/mtls-migration/ [warning][config]
[bazel-out/k8-opt/bin/external/envoy/source/common/config/_virtual_includes/grpc_stream_lib/common/config/grpc_stream.h:91]
gRPC config stream closed: 13

Vérifier que metric.mesh_uid est correctement défini

Ouvrir Explorateur de métriques Exécutez ensuite la requête MQL suivante:

fetch istio_canonical_service
| metric 'istio.io/service/server/request_count'
| align delta(1m)
| every 1m
| group_by [metric.destination_canonical_service_namespace, metric.destination_canonical_service_name, metric.mesh_uid]

Vérifiez que tous les services attendus génèrent des rapports sur des métriques, et que leurs metric.mesh_uid est au format proj-<Cloud Service Mesh fleet project number>.

Remarque :Pour les maillages multiprojets, le numéro de projet doit correspondre au parc plutôt que sur le projet hôte.

Si metric.mesh_uid a une autre valeur, le tableau de bord Cloud Service Mesh n'affiche pas les métriques. metric.mesh_uid est défini lorsque Cloud Service Mesh est installé sur le cluster. Examinez votre méthode d'installation pour voir si il existe un moyen de la définir sur la valeur attendue.

Données de télémétrie manquantes ou incorrectes pour les services

Par défaut, Cloud Monitoring et Cloud Logging sont activés dans votre projet Google Cloud lorsque vous installez Cloud Service Mesh. Pour signaler des données de télémétrie, chaque proxy side-car injecté dans vos pods de service appelle l'API Cloud Monitoring et l'API Cloud Logging. Après le déploiement des charges de travail, l'affichage des données de télémétrie dans la console Google Cloud prend une à deux minutes environ pour apparaître. Cloud Service Mesh conserve automatiquement les tableaux de bord des services à jour:

• Pour les métriques, les proxys side-car appellent l'API Cloud Monitoring toutes les minutes environ.
• Pour mettre à jour le graphique Topologie, les proxys side-car envoient des rapports incrémentiels toutes les minutes environ et des rapports complets toutes les dix minutes environ.
• Pour la journalisation, les proxys side-car appellent l'API Cloud Logging toutes les dix secondes environ.
• Pour le traçage, vous devez activer Cloud Trace. Les traces sont enregistrées en fonction de la fréquence d'échantillonnage que vous avez configurée (généralement une requête sur 100).

Les métriques ne sont affichées que pour les services HTTP sur le maillage de services Cloud Page des métriques. Si vous ne voyez aucune métrique, vérifiez que tous les pods du des services de votre application avec des proxys side-car injectés:

kubectl get pod -n YOUR_NAMESPACE --all

Dans le résultat, notez que la colonne READY affiche deux conteneurs pour chacune de vos charges de travail : le conteneur principal et le conteneur du proxy side-car.

De plus, le tableau de bord "Services" n'affiche que les métriques du serveur. les données peuvent ne pas apparaître si le client ne fait pas partie du réseau maillé ou s'il est configuré pour ne génèrent que des rapports sur les métriques client (telles que les passerelles d'entrée).