Vérifier la qualité des données pour les recommandations multimédias

Cette page explique comment savoir si les différentes métriques de vos données multimédias respectent leurs seuils d'exigence.

À propos de la vérification de la qualité des données multimédias

Étant donné que les événements utilisateur récents sont très importants pour les recommandations multimédias, vous devez vérifier régulièrement la qualité de vos données ingérées et de vos événements utilisateur. Pour ce faire, consultez l'onglet Optimisation de votre application de recommandations de contenus multimédias afin de déterminer les améliorations que vous pouvez apporter à vos données afin d'optimiser les recommandations de meilleure qualité.

Si le seuil d'une métrique n'est pas atteint, elle est associée à un état d'avertissement. Vous devez ensuite examiner la métrique et sa description pour déterminer l'action à entreprendre pour améliorer la qualité de vos contenus multimédias.

Tous les modèles et objectifs doivent atteindre les seuils de la métrique Qualité générale. Certains modèles et objectifs présentent des métriques et des seuils de qualité spécifiques à l'application supplémentaires. Les métriques de qualité générales sont les mêmes pour toutes les applications utilisant le même data store, mais les métriques de qualité spécifiques à l'application varient en fonction du modèle et des objectifs de l'application.

Pour en savoir plus sur les modèles et les objectifs de recommandation, consultez la section À propos des types de recommandations d'applications multimédias.

Vérifier la qualité des données

Console

Pour vérifier la qualité des données de vos recommandations multimédias, procédez comme suit:

  1. Dans la console Google Cloud, accédez à la page Agent Builder.

    Agent Builder

  2. Cliquez sur le nom de l'application de recommandations multimédias pour laquelle vous souhaitez vérifier la qualité des données.

  3. Dans le menu de navigation, cliquez sur Qualité des données, puis sur l'onglet Optimisation. Cette page indique l'état de différentes métriques pour les données associées à votre application.

  4. Consultez les états Qualité générale et Qualité spécifique à l'application en haut de la page. L'état récapitulatif en haut de la page s'affiche sous forme d'avertissement si une ou plusieurs métriques ont dépassé leur seuil.

    Les deux tableaux de métriques (Qualité générale et Qualité spécifique à l'application) listent les métriques individuelles.

    L'onglet "Optimisation" affiche une métrique d'avertissement pour la qualité générale (doc_with_same_title_percentage)

  5. Dans les tableaux des métriques, cliquez sur Afficher les détails pour en savoir plus sur les métriques en état d'avertissement.

  6. Facultatif: Si vous souhaitez afficher le seuil d'une métrique conforme, cliquez sur Afficher les détails. Les seuils des métriques conformes ne sont pas affichés dans le tableau des métriques.

REST

Utilisez la méthode requirements:checkRequirement pour vérifier la qualité de vos données de recommandations multimédias, comme illustré.

Pour vérifier la qualité à partir de la ligne de commande, procédez comme suit:

  1. Recherchez l'ID de votre data store. Si vous disposez déjà de l'ID de votre data store, passez à l'étape suivante.

    1. Dans la console Google Cloud, accédez à la page Agent Builder et cliquez sur Data Stores dans le menu de navigation.

      Accéder à la page "Datastores"

    2. Cliquez sur le nom de votre data store.

    3. Sur la page Données de votre data store, obtenez l'ID du data store.

  2. Exécutez la commande curl suivante pour savoir si vos recommandations multimédias respectent les seuils des métriques générales:

    curl -X POST \
-H "Authorization: Bearer $(gcloud auth print-access-token)" \
-H "Content-Type: application/json" \
-H "X-GFE-SSL: yes" \
-H "X-Goog-User-Project: PROJECT_ID" \
"https://discoveryengine.googleapis.com/v1alpha/projects/PROJECT_ID/locations/global/requirements:checkRequirement" \
-d '{
      "location": "projects/PROJECT_ID/locations/global",
      "requirementType": "discoveryengine.googleapis.com/media_recs/general/all/warning",
      "resources": [
        {
          "labels": {
            "branch_id": "0",
            "collection_id": "default_collection",
            "datastore_id": "DATA_STORE_ID",
            "location_id": "global",
            "project_number": "PROJECT_ID"
          },
          "type": "discoveryengine.googleapis.com/Branch"
        },
        {
          "labels": {
            "collection_id": "default_collection",
            "datastore_id": "DATA_STORE_ID",
            "location_id": "global",
            "project_number": "PROJECT_ID"
          },
          "type": "discoveryengine.googleapis.com/DataStore"
        }
      ]
    }'
    • PROJECT_ID : ID de votre projet Google Cloud
    • DATA_STORE_ID: ID du data store Vertex AI Search.

  3. Examinez le résultat:

    1. Recherchez la valeur de result:

      • Si la valeur est SUCCESS, vos données répondent aux exigences générales. Passez à l'étape 4.

      • Si la valeur est WARNING, passez à l'étape b.

      • Si result ne s'affiche pas dans la sortie, plusieurs raisons peuvent expliquer cela:

        • La valeur PROJECT_ID ou DATA_STORE_ID de la requête est incorrecte.

        • Certaines valeurs de métrique ne sont pas disponibles. Réessayez dans six heures ou contactez un ingénieur client pour obtenir de l'aide.

    2. Recherchez l'expression (requirement.Condition.Expression): si cette expression renvoie la valeur "false", un problème est survenu avec vos données.

      La valeur des métriques se trouve dans le champ requirementCondition.metricResults.value. Les valeurs du seuil d'avertissement se trouvent dans les champs thresholdBindings.thresholdValues. Les champs description peuvent vous aider à comprendre l'objectif de la métrique.

      Par exemple, la valeur de doc_with_same_title_percentage est 30.47 et le seuil d'avertissement pour doc_with_same_title_percentage_threshold est 1. Il existe un problème de données, car de nombreux titres du data store sont identiques. Cela doit être examiné.

  4. Si la combinaison de modèle et d'objectif utilisée pour votre application de recommandations apparaît dans ce tableau, vous devez également appeler la méthode de vérification des exigences, mise à jour avec les valeurs de votre modèle et de votre objectif:

    Modèle Objectif MODEL_OBJ
    Autres articles susceptibles de vous intéresser Taux de conversion oyml/cvr
    Recommandées pour vous Taux de conversion rfy/cvr
    Résultats similaires Taux de conversion mlt/cvr
    Les plus populaires Taux de conversion mp/cvr
    Autres articles susceptibles de vous intéresser Durée de visionnage par session oyml/wdps
    Recommandées pour vous Durée de visionnage par session rfy/wdps
    Résultats similaires Durée de visionnage par session mlt/wdps 

    curl -X POST \
-H "Authorization: Bearer $(gcloud auth print-access-token)" \
-H "Content-Type: application/json" \
-H "X-GFE-SSL: yes" \
-H "X-Goog-User-Project: PROJECT_ID" \
"https://discoveryengine.googleapis.com/v1alpha/projects/PROJECT_ID/locations/global/requirements:checkRequirement" \
-d '{
      "location": "projects/PROJECT_ID/locations/global",
      "requirementType": "discoveryengine.googleapis.com/media_recs/MODEL_OBJ/warning",
      "resources": [
        {
          "labels": {
            "branch_id": "0",
            "collection_id": "default_collection",
            "datastore_id": "DATA_STORE_ID",
            "location_id": "global",
            "project_number": "PROJECT_ID"
          },
          "type": "discoveryengine.googleapis.com/Branch"
        },
        {
          "labels": {
            "collection_id": "default_collection",
            "datastore_id": "DATA_STORE_ID",
            "location_id": "global",
            "project_number": "PROJECT_ID"
          },
          "type": "discoveryengine.googleapis.com/DataStore"
        }
      ]
    }'
    • PROJECT_ID : ID de votre projet Google Cloud
    • DATA_STORE_ID: ID du data store Vertex AI Search.
    • MODEL_OBJ: consultez le tableau précédent pour choisir la valeur appropriée pour votre application de recommandations.

  5. Examinez le résultat:

    1. Recherchez la valeur de result:

      • Si la valeur est SUCCESS, vos données sont acceptables.

      • Si la valeur est WARNING, passez à l'étape b.

      • Si result ne s'affiche pas dans la sortie, plusieurs raisons peuvent expliquer cela:

        • La valeur PROJECT_ID ou DATA_STORE_ID de la requête est incorrecte.

        • Certaines valeurs de métrique ne sont pas disponibles. Réessayez dans six heures ou contactez un ingénieur client pour obtenir de l'aide.

    2. Examinez l'expression (requirement.Condition.Expression). Si cette expression renvoie la valeur "false", un problème est survenu avec vos données.

      La valeur des métriques se trouve dans le champ requirementCondition.metricResults.value, et les valeurs du seuil d'avertissement dans les champs thresholdBindings.thresholdValues. Les champs description peuvent vous aider à comprendre l'objectif de la métrique.