Filtres de surveillance

Ce guide explique comment configurer des filtres lorsque vous utilisez l'API Monitoring. Vous pouvez utiliser des filtres pour spécifier les ressources surveillées, les types de métriques, les définitions de groupes et les séries temporelles.

Vous pouvez également utiliser un filtre pour configurer une règle d'alerte qui surveille les processus exécutés sur vos systèmes. Pour en savoir plus sur ces filtres, consultez la page Filtres d'état de processus.

Avant de commencer

Si vous ne connaissez pas bien les métriques, les séries temporelles et les ressources surveillées, consultez la page Métriques, séries temporelles et ressources.

Si vous ne connaissez pas le fonctionnement des libellés, consultez la section Libellés pour obtenir une présentation.

Utiliser des filtres

Vous pouvez utiliser des filtres dans l'API Monitoring pour effectuer les opérations suivantes :

Sélecteurs de filtres

Un filtre comprend au moins un sélecteur, c'est-à-dire un mot clé de filtre. Les exemples simples ci-dessous illustrent les différents sélecteurs :

  • project: établit une correspondance lorsque les métriques du projet spécifié sont visibles par le projet de champ d'application d'un champ d'application de métriques mentionné dans le paramètre name.

    Utilisez le sélecteur project lorsqu'un projet Google Cloud peut afficher les métriques de plusieurs projets Google Cloud ou comptes AWS et que vous ne souhaitez afficher les métriques que d'un seul projet. Par exemple, si le champ d'application des métriques pour Project-A inclut Project-B, une correspondance se produit lorsque name a la valeur Project-A et que vous utilisez le filtre suivant :

        project = "Project-B"
    
  • group: correspond aux ressources appartenant à un groupe (Group).

    • Renvoie le groupe avec l'identifiant group-id :

      group.id = "group-id"
      
  • resource : renvoie les ressources surveillées d'un type particulier ou ayant des valeurs de libellé particulières.

    • Renvoie toutes les ressources surveillées qui sont des instances de machine virtuelle (VM) Compute Engine :

      resource.type = "gce_instance"
      
    • Renvoie toutes les ressources dont la zone commence par europe- :

      resource.labels.zone = starts_with("europe-")
      
  • metric : renvoie un type de métrique ou une série temporelle spécifique avec un libellé particulier correspondant à une valeur spécifique.

    • Correspond à une métrique spécifique:

      metric.type = "compute.googleapis.com/instance/cpu/usage_time"
      
    • Renvoie des séries temporelles associées au libellé instance_name, dont la valeur commence par gke-hipster ou gke-nginx :

      metric.labels.instance_name = monitoring.regex.full_match("^gke-(hipster|nginx).*")
      

Le tableau suivant indique les sélecteurs autorisés dans les filtres en fonction de l'appel de l'API Monitoring :

Objectif du filtre Sélecteur de project Sélecteur de group Sélecteur de resource Sélecteur de metric
Définir des groupes oui Oui1
Répertorier les membres d'un groupe Oui oui
Répertorier les séries temporelles oui oui oui Oui2
Répertorier les descripteurs de métriques Oui Oui
Répertorier les descripteurs de ressources surveillées oui
1 Le sélecteur de ressource comporte des options supplémentaires lorsqu'il est utilisé pour définir l'appartenance à un groupe.
2 Lorsque vous répertoriez des séries temporelles, vous devez spécifier exactement un type de métrique.

Les sections suivantes présentent des exemples d'utilisations courantes de filtres de surveillance. Pour en savoir plus sur les opérateurs et les objets de filtrage disponibles, consultez la section Syntaxe des filtres.

Récupérer des données de séries temporelles

Méthode : projects.timeSeries.list
Objets de filtrage : project, group.id, resource.type, resource.labels.[KEY], metric.type, metric.labels.[KEY]

Une série temporelle est une liste de points de données horodatés d'un type de métrique issus d'une ressource surveillée spécifique. Pour en savoir plus, consultez la section Modèle de métrique. Le type de métrique est spécifié par un descripteur de métrique, et la ressource surveillée est spécifiée par un descripteur de ressource surveillée.

Le filtre spécifié dans la commande list doit inclure un sélecteur metric qui ne doit spécifier qu'un seul type de métrique :

  • Renvoyer toutes les séries temporelles pour un type de métrique particulier :

    metric.type = "compute.googleapis.com/instance/cpu/usage_time"
    
  • Renvoyer toutes les séries temporelles d'un groupe spécifique. Le sélecteur group ne fonctionne qu'avec les données de séries temporelles alignées. Pour en savoir plus, consultez la section Sélecteur de groupe :

    metric.type = "compute.googleapis.com/instance/cpu/usage_time" AND
        group.id = "2468013579"
    
  • Renvoyer toutes les séries temporelles d'une instance Compute Engine spécifique:

    metric.type = "compute.googleapis.com/instance/cpu/usage_time" AND
        metric.labels.instance_name = "my-instance-name"
    
  • Renvoyer toutes les séries temporelles issues d'instances Compute Engine dont le nom commence par frontend-:

    metric.type = "compute.googleapis.com/instance/cpu/usage_time" AND
        metric.labels.instance_name = starts_with("frontend-")
    
  • Renvoyer toutes les séries temporelles issues d'instances Compute Engine dont le nom commence par gke-hipster ou gke-nginx:

    metric.type = "compute.googleapis.com/instance/cpu/usage_time" AND
        metric.labels.instance_name = monitoring.regex.full_match("^gke-(hipster|nginx).*")
    

Définir l'appartenance à un groupe

Méthode : projects.groups
Objets de filtrage : project, resource.type, resource.labels.key, metadata.system_labels.[KEY], metadata.user_labels.[KEY]

Un groupe peut contenir un nombre illimité de ressources, tel que spécifié par un filtre. L'appartenance à un groupe est dynamique. Une ou plusieurs ressources peuvent correspondre au filtre chaque fois qu'il est appliqué. Le paramètre name de l'objet Group spécifie le groupe et le projet de champ d'application d'un champ d'application de métriques. Si le sélecteur project est utilisé dans le filtre, il doit spécifier un projet dont les métriques sont visibles par le projet de champ d'application.

  • Toutes les instances de machine virtuelle (VM) Compute Engine en Europe :

    resource.type = "gce_instance" AND resource.labels.zone = starts_with("europe-")
    

Répertorier les membres d'un groupe

Méthode : projects.groups.members.list
Objets de filtrage : project, resource.type, resource.labels.[KEY]

Utilisez un filtre pour limiter les membres du groupe que vous récupérez. Le paramètre name spécifie un projet de champ d'application d'un champ d'application des métriques et un groupe défini dans ce projet. Si le sélecteur project est utilisé dans le filtre, il doit spécifier un projet dont les métriques sont visibles par le projet de champ d'application.

  • Toutes les ressources de sujet Pub/Sub appartenant au projet my-project:

    project = "my-project" AND resource.type = "pubsub_topic"
    

Répertorier les descripteurs de métriques

Méthode : projects.metricDescriptors.list
Objets de filtrage : project, metric.type

Utilisez un filtre pour limiter les descripteurs de métriques que vous récupérez :

  • Pour ne renvoyer que les descripteurs de métrique Compute Engine, utilisez le filtre suivant :

    metric.type = starts_with("compute.googleapis.com")
    

Consultez la page Liste des métriques pour obtenir la liste complète des types de métriques définis par Monitoring. Pour en savoir plus sur le nommage des métriques, consultez la page conventions de nommage et exigences.

Répertorier les descripteurs de ressources surveillées

Méthode : projects.monitoredResourceDescriptors.list
Objets de filtrage : resource.type

Utilisez un filtre pour limiter les descripteurs de ressources surveillées que vous récupérez :

  • Pour ne récupérer que les descripteurs de ressources surveillées par Pub/Sub, utilisez le filtre suivant :

    resource.type = starts_with("pubsub")
    

Consultez la page Liste des ressources surveillées pour obtenir la liste complète des types de ressources surveillées définis par Monitoring.

Référence : syntaxe des filtres

Pour obtenir une présentation des filtres et des exemples, consultez la section Utiliser des filtres.

Un filtre de surveillance est une chaîne composée de quatre types de sélecteurs au maximum :

<monitoring_filter> ::=  <project_selector> AND <group_selector> AND <resource_selector> AND <metric_selector>

Le filtre correspond à un élément si tous les sélecteurs inclus correspondent à cet élément. Comme décrit dans les sections suivantes, certains sélecteurs peuvent comporter plusieurs comparaisons jointes par AND ou OR.

Selon l'objectif du filtre, certains sélecteurs peuvent être obligatoires, facultatifs ou interdits. Par exemple, le filtre qui définit les ressources d'un groupe ne peut pas contenir de sélecteur de métriques, car les groupes ne contiennent pas de type de métrique ou de série temporelle. En revanche, le filtre utilisé pour répertorier les séries temporelles doit contenir un sélecteur de métrique. L'ordre des sélecteurs dans le filtre n'a pas d'importance, mais les comparaisons des différents sélecteurs ne doivent pas être mélangées.

Comparaisons

Les filtres et leurs sélecteurs sont basés sur des comparaisons. Chaque comparaison se présente sous la forme suivante :

[OBJECT] [OPERATOR] [VALUE]

Ces éléments sont décrits ci-dessous :

  • [OBJECT] : sélectionne une valeur à tester, parmi les suivantes :

    project
    group.id
    metric.type
    metric.labels.[KEY]
    resource.type
    resource.labels.[KEY]
    metadata.system_labels.[KEY]
    metadata.user_labels.[KEYSTRING]
    

    [KEY] est un nom, tel que zone ou instance_id. [KEYSTRING] peut être un nom, mais s'il contient des caractères spéciaux, il doit être placé entre guillemets (").

  • [OPERATOR] : un opérateur de comparaison, parmi les suivants :

    =            # equality (case-sensitive)
    > < >= <=    # numeric ordering
    !=           # not equal
    :            # "has" substring match and test for key (case-sensitive)
    
  • [VALUE] : une valeur littérale ou un appel de fonction intégré, parmi les suivants :

    <string>     # "a Unicode string". Don't use apostrophes (`'`) to quote strings.
    <bool>       # true or false
    <number>     # 0, -2, 123456, 3.14156
    <function>   # operators on the right side of '=' or '!=':
                 #   starts_with(<string>)
                 #   ends_with(<string>)
                 #   has_substring(<string> [, ignore_case=false])
                 #   one_of(<string>,...,<string>) for up to 100 strings
                 #   monitoring.regex.full_match(<RE2-string>)
    

    Sauf dans le cas de timeSeries.list, le filtre has_substring utilise un deuxième argument facultatif, qui spécifie si la correspondance ignore ou non la casse. La valeur par défaut est false. La correspondance par défaut est donc sensible à la casse :

    • Sensible à la casse : display_name=has_substring("Demo")
    • Sensible à la casse : display_name=has_substring("Demo", false)
    • Non sensible à la casse : display_name=has_substring("Demo", true)

    Seul le format has_substring(<string>) est compatible avec timeSeries.list.

    Le filtre monitoring.regex.full_match utilise une chaîne d'expression régulière dans la syntaxe RE2.

Vous pouvez utiliser les opérateurs suivants pour regrouper ou modifier des comparaisons. OR a une priorité plus élevée que AND. Les opérateurs doivent être écrits en majuscules :

(...)        # grouping comparisons
AND          # conjunction (optional but recommended)
OR           # disjunction

L'opérateur AND peut être omis entre les opérateurs, mais il est plus clair de l'inclure et cela réduit les erreurs.

La comparaison x = one_of("a", "b", "c") équivaut à :

(x = "a" OR x = "b" OR x = "c")

Uniquement dans les définitions de groupe, vous pouvez utiliser l'opérateur de négation unaire NOT avant une comparaison, mais pas avec un opérateur existant (:) ou avant une expression entre parenthèses :

NOT          # negates the following comparison

Sélecteurs de filtres

Les sélecteurs vous permettent de limiter les sélections de filtres à certains éléments. Dans les sections suivantes, les accolades sont utilisées pour afficher la répétition. Par exemple, la notation <x> {OR <y>} signifie que vous pouvez écrire l'un des éléments suivants :

<x>
<x> OR <y>
<x> OR <y> OR <y>
<x> OR <y> OR <y> OR <y>
...

Sélecteur de projet

Un sélecteur de projet limite la sélection du filtre aux éléments appartenant à un seul projet ou à n'importe quel projet d'un ensemble de projets. Chaque projet peut être spécifié par son ID ou son numéro :

<project_selector> ::= project '=' (<number> | <string>) {OR project '=' (<number> | <string>)}

Si le sélecteur de projet comporte plusieurs comparaisons, placez le sélecteur entier entre parenthèses pour une meilleure lisibilité. Exemple :

(project=12345 OR project="my-project-id") AND resource.type="gce_instance"

Sélecteur de groupe

Un sélecteur de groupe limite la sélection du filtre aux éléments appartenant à un seul groupe :

<group_selector> ::= group.id '=' <string>

Par exemple, le filtre suivant peut être utilisé pour récupérer une série temporelle de chacune des instances de VM d'un groupe :

group.id = 12345 AND
    resource.type = "gce_instance" AND
    metric.type = "compute.googleapis.com/instance/disk/read_bytes_count"

Le sélecteur de groupe n'est autorisé que dans les filtres transmis à projects.timeSeries.list. De plus, la sélection de groupes nécessite des données alignées. Autrement dit, l'appel de projects.timeSeries.list doit inclure les valeurs de perSeriesAligner et de alignmentPeriod. En effet, l'appartenance à un groupe est elle-même une sorte de série temporelle qui doit être associée aux données de métrique. Si vous spécifiez des paramètres d'alignement, vous pouvez contrôler la manière dont cette agrégation se produit. Pour en savoir plus sur les paramètres d'alignement, consultez la section Agréger des données.

Sélecteur de ressource

Un sélecteur de ressources limite la sélection du filtre aux ressources (ou aux éléments associés aux ressources) qui ont un type de ressource ou des valeurs de libellé spécifiques :

<resource_selector> ::= <resource_type_expression>
                      | <resource_label_expression>
                      | <resource_type_expression> AND <resource_label_expression>

<resource_type_expression> ::= resource.type '=' <string>
                             | resource.type ':' <string>
                             | resource.type '=' starts_with '(' <string>')'
                             | resource.type '=' ends_with '(' <string> ')'

<resource_label_expression> ::= <r_label_comparison> {AND <r_label_comparison>}
                              | <r_label_comparison> {OR <r_label_comparison>}

<r_label_comparison> ::= resource.labels.[KEY] '=' (<string> | <bool>)
                       | resource.labels.[KEY] ':' <string>
                       | resource.labels.[KEY] '=' (starts_with | ends_with) '(' <string> ')'
                       | resource.labels.[KEY] ('=' | '>' | '<' | '>=' | '<=') <number>

Si vous utilisez plusieurs <r_label_comparison> dans votre sélecteur, placez-les entre parenthèses pour une meilleure lisibilité. Par exemple, le filtre suivant peut être utilisé pour définir un groupe incluant toutes les instances de VM aux États-Unis et en Europe :

resource.type = "gce_instance" AND
  (resource.labels.zone = starts_with("us-") OR resource.labels.zone = starts_with("europe-"))

Sélecteur de ressource pour les définitions de groupes

Les sélecteurs de ressource utilisés pour définir l'appartenance à un groupe utilisent des extensions de la syntaxe <resource_selector> :

  1. Vous incluez des filtres en fonction de la valeur des libellés système de métadonnées, metadata.system_labels.[KEY], et des libellés utilisateur des métadonnées, metadata.user_labels.[KEYSTRING]. Les clés de metadata.user_labels doivent être placées entre guillemets, car elles peuvent contenir des caractères spéciaux tels que des traits d'union.

    Lorsqu'un sélecteur contient un filtre de métadonnées et un filtre de ressource, vous devez les combiner avec AND. Vous ne pouvez pas utiliser OR. Par exemple, un graphique avec le sélecteur suivant affiche l'utilisation du processeur pour toutes les instances de VM dont le type de machine est e2-medium ou e2-micro:

    metric.type="compute.googleapis.com/instance/cpu/utilization"
    resource.type="gce_instance" AND
    (metadata.system_labels."machine_type"="e2-medium" OR
     metadata.system_labels."machine_type"="e2-micro")
    
  2. Vous pouvez utiliser l'opérateur "différent de" (!=) pour comparer les types de ressources, les libellés de ressource et les métadonnées. L'opérateur peut être utilisé lors de la comparaison de chaînes, de nombres, de valeurs booléennes ou de fonctions de sous-chaîne. Par exemple, resource.type!=starts_with("gce") est défini sur "true" si le type de ressource ne commence pas par "gce".

  3. Vous pouvez utiliser un seul opérateur NOT avant une comparaison de ressources. Par exemple, NOT resource.labels.zone="europe" est défini sur "true" si la zone de la ressource n'inclut pas "europe". Vous ne pouvez pas utiliser NOT avant un opérateur existant (:) ou une expression entre parenthèses.

  4. Vous pouvez utiliser l'opérateur existant (:) pour tester l'existence de clés. Par exemple, la comparaison resource.labels:zone est défini sur "true" si la clé de libellé zone est présente dans la ressource.

Par exemple, l'une des clés de métadonnées de ressource de plate-forme pour les instances de VM est spot_instance. Le sélecteur de filtre suivant sélectionne les instances qui sont des instances spot :

    resource.type = "gce_instance" AND metadata.system_labels.spot_instance = true

Sélecteur de métrique

Un sélecteur de métrique spécifie certaines métriques ou certains descripteurs de métriques en limitant le type de métrique et les libellés de métriques. Lorsque vous répertoriez des données de séries temporelles, le sélecteur de métrique doit spécifier un seul type de métrique :

<metric_selector> ::= <metric_name_expression> [AND <metric_label_expression>]

<metric_name_expression> ::= metric.type '=' <string>
                           | metric.type ':' <string>
                           | metric.type '=' starts_with '(' <string> ')'
                           | metric.type '=' ends_with '(' <string> ')'

<metric_label_expression> ::= <metric_label_comparison> {[AND] <metric_label_comparison>}
                            | <metric_label_comparison> {OR <metric_label_comparison>}

<metric_label_comparison> ::= metric.labels.[KEY] '=' <string> | <bool>
                            | metric.labels.[KEY] ':' <string>
                            | metric.labels.[KEY] '=' starts_with '(' <string> ')'
                            | metric.labels.[KEY] '=' ends_with '(' <string> ')'
                            | metric.labels.[KEY] ('=' | '>' | '<' | '>=' | '<=') <number>

Par exemple, le filtre suivant peut être utilisé afin de récupérer une série temporelle pour une instance de base de données spécifique :

metric.type = "cloudsql.googleapis.com/database/state" AND
  (metric.labels.resource_type = "instance" AND
   metric.labels.resource_id = "abc-123456")

Examples

Dans les exemples de filtrage, nous utilisons le descripteur de métrique, le descripteur de ressource surveillée et l'instance de machine virtuelle suivants, qui ont été simplifiés pour l'illustration :

# Metric descriptor:
{ "name": "projects/my-project-id/metricDescriptors/compute.googleapis.com%2Finstance%2Fdisk%2Fread_bytes_count"
  "type": "compute.googleapis.com/instance/disk/read_bytes_count",
  "labels": [ { "key": "device_name",
                "description": "The name of the disk device." } ] }

# Monitored resource descriptor:
{  "name": "monitoredResourceDescriptors/gce_instance"
   "type": "gce_instance",
   "labels": [
     { "key": "instance_id",
       "description": "The instance ID provide by Google Compute Engine." },
     { "key": "zone",
       "description": "The Google Cloud Platform zone hosting the instance."
     } ] }

# Resource descriptor for a virtual machine instance.
{ "type": "gce_instance",
  "instance_id": "1472038649266883453",
  "zone": "us-east-1b",
  "disks": [ "log_partition" ],
  "machine_type": "n1-standard-2",
  "tags": { "environment": "bleeding-edge",
            "role": "frobulator" },
  "project_id": "my-project-id" }

Exemples de récupération de métriques

Pour demander l'utilisation de la bande passante en lecture de disque pour toutes les instances et tous les appareils, définissez un filtre comme indiqué ci-dessous. Cela renvoie, pour chaque instance, une série temporelle distincte indiquant la bande passante en lecture pour chaque appareil :

metric.type = "compute.googleapis.com/instance/disk/read_bytes_count"

Pour affiner la requête d'interrogation de la bande passante en lecture pour uniquement le disque appelé "log_partition" sur chaque instance, définissez le filtre comme indiqué ci-dessous. Ce filtre renvoie, pour chaque instance, une série temporelle au maximum, selon qu'un appareil de ce nom existe sur cette instance :

metric.type = "compute.googleapis.com/instance/disk/read_bytes_count" AND
metric.labels.device_name = "log_partition"

Pour limiter la requête à une seule instance, spécifiez cette instance :

resource.type = "gce_instance" AND
resource.labels.instance_id = "1472038649266883453" AND
metric.type = "compute.googleapis.com/instance/disk/read_bytes_count" AND
metric.labels.device_name = "log_partition"

Filtrer avec des groupes

Les exemples suivants illustrent l'utilisation du sélecteur de groupe dans les filtres pour restreindre les ressources surveillées à celles d'un groupe spécifique. Pour plus d'informations sur les sélecteurs utilisés pour définir l'appartenance à un groupe, consultez la section Définitions de groupe.

{ "name": "projects/my-test-project/groups/024681012",
  "display_name": "My Redis Cluster",
  "filter": "metadata.user_labels.role=redis" }

Dans un appel à la méthode projects.timeSeries.list, le filtre suivant demande l'utilisation de la bande passante en lecture de disque pour toutes les instances Compute Engine d'un groupe particulier. Le groupe doit être défini dans le projet de champ d'application d'un champ d'application de métriques spécifié dans le paramètre name de la méthode :

resource.type = "gce_instance" AND
group.id = "024681012" AND
metric.type = "compute.googleapis.com/instance/disk/read_bytes_count"