Lire et écrire des journaux d'application

Aperçu

Lorsqu'une requête est envoyée à votre application, un journal de requêtes est automatiquement écrit par App Engine. Pendant le traitement de la requête, votre application peut également écrire des journaux d'application. Cette page explique comment écrire des journaux d'application depuis votre application, comment consulter la journalisation dans Google Cloud Console et comment interpréter les données du journal de requêtes écrit par App Engine au moment de la requête.

Pour savoir en détail comment télécharger des données de journal, consultez la page Présentation des exportations de journaux.

Journaux d'application et journaux de requêtes

Il existe deux catégories de données de journal : les journaux de requêtes et les journaux d'application. Un journal de requêtes est automatiquement écrit par App Engine pour chaque requête traitée par votre application. Il contient des informations telles que l'ID de projet, la version HTTP, etc. Pour obtenir une liste complète des propriétés des journaux de requêtes disponibles, consultez la section Journaux de requêtes. Vous trouverez également une description des champs de journal de requêtes à la section Table de journalisation des requêtes.

Chaque journal de requêtes contient une liste de journaux d'application (AppLogLine) associés à cette requête, renvoyés par la méthode RequestLogs.getAppLogLines(). Chaque journal d'application contient l'heure d'écriture du journal, ainsi que le message et le niveau de journal.

Écrire des journaux d'application

Le SDK App Engine pour Java permet à un développeur d'enregistrer les niveaux de gravité suivants :

  • SEVERE
  • WARNING
  • INFO
  • CONFIG
  • FINE
  • FINER
  • FINEST

Les niveaux INFO, WARNING et SEVERE apparaissent dans les journaux sans nécessiter de configuration supplémentaire. Pour ajouter d'autres niveaux de journalisation à votre application Java, vous devez ajouter les propriétés système appropriées au fichier appengine-web.xml de votre projet et, le cas échéant, modifier le fichier logging.properties pour définir le niveau de journalisation souhaité. Ces deux fichiers sont générés lorsque vous créez un projet App Engine Java à l'aide de Maven. Vous pouvez trouver ces fichiers aux emplacements suivants :

Arborescence projet de Maven

Pour ajouter des niveaux de journalisation autres que INFO, WARNING ou SEVERE, modifiez le fichier appengine-web.xml pour ajouter les éléments suivants dans les tags <appengine-web-app> :

    <system-properties>
       <property name="java.util.logging.config.file" value="WEB-INF/logging.properties"/>
    </system-properties>

Le niveau de journalisation renseigné par défaut dans logging.properties est INFO. Pour modifier le niveau de journalisation par défaut pour toutes les classes de votre application, changez le niveau renseigné dans le fichier logging.properties. Par exemple, vous pouvez passer de .level = INFO à .level = WARNING.

Dans le code de votre application, écrivez des messages de journal à l'aide de l'API java.util.logging.Logger. L'exemple ci-dessous écrit un message de journal d'informations :

import java.util.logging.Logger;
//...

public class MyClass {

  private static final Logger log = Logger.getLogger(MyClass.class.getName());
  log.info("Your information log message.");
  //....

Lorsque votre application s'exécute, App Engine enregistre les messages et les met à disposition dans l'explorateur de journaux.

Format d'URL de journal dans la console Google Cloud

Voici un exemple d'URL présentant le format d'URL de journal tel qu'il apparaît dans la console :

https://console.cloud.google.com/logs?filters=request_id:000000db00ff00ff827e493472570001737e73686966746361727331000168656164000100

Lire des journaux dans la console

Pour afficher les journaux écrits par les applications exécutées dans l'environnement standard, utilisez l'explorateur de journaux.

Un journal classique d'App Engine contient des données au format de journal combiné Apache, ainsi que des champs App Engine spéciaux, comme le montre l'exemple de journal ci-dessous :

192.0.2.0 - test [27/Jun/2014:09:11:47 -0700] "GET / HTTP/1.1" 200 414
"http://www.example.com/index.html"
Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/35.0.1916.153 Safari/537.36"
"1-dot-calm-sylph-602.appspot.com" ms=195 cpu_ms=42 cpm_usd=0.000046
loading_request=1 instance=00c61b117cfeb66f973d7df1b7f4ae1f064d app_engine_release=1.9.98

Comprendre les champs de journal de requêtes

Le tableau suivant répertorie les champs par ordre d'occurrence et leur description :

Numéro de champ Nom du champ Toujours présent ? Description
1 Client address Oui Adresse IP du client. Exemple : 192.0.2.0
2 RFC 1413 identity Non Identité RFC 1413 du client, presque toujours le caractère -
3 User Non Présent uniquement si l'application utilise l'API Users et que l'utilisateur est connecté. Cette valeur correspond à la partie "pseudo" du compte Google. Par exemple, si le compte Google est test@example.com, le pseudo enregistré dans ce champ est test.
4 Timestamp Oui Horodatage de la requête. Exemple : [27/Jun/2014:09:11:47 -0700]
5 Request querystring Oui Première ligne de la requête contenant la méthode, le chemin et la version HTTP. Exemple : GET / HTTP/1.1
6 HTTP Status Code Oui Code d'état HTTP renvoyé. Exemple : 200
7 Response size Oui Taille de réponse en octets. Exemple : 414
8 Referrer path Non En l'absence d'URL de provenance, le journal ne contient aucun chemin, seulement le caractère -. Exemple de chemin de provenance : "http://www.example.com/index.html".
9 User-agent Oui Identifie le navigateur et le système d'exploitation sur le serveur Web. Exemple : Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/35.0.1916.153 Safari/537.36
10 Hostname Oui Nom d'hôte utilisé par le client pour se connecter à l'application App Engine. Exemple : (1-dot-calm-sylph-602.appspot.com)
11 Wallclock time Oui Temps total en millisecondes passé par App Engine sur la requête. Cette durée n'inclut pas le temps passé entre le client et le serveur qui exécute l'instance de votre application. Exemple : ms=195.
12 CPU milliseconds Oui Nombre de millisecondes nécessaires au processeur pour répondre à la requête, Il s'agit du temps en millisecondes passé par le processeur à exécuter le code de votre application, pour un processeur de référence Intel x86 de 1,2 GHz. Si le processeur utilisé est plus rapide que celui de référence, cette valeur peut être supérieure au temps total réel défini précédemment. Exemple : cpu_ms=42
13 Exit code Non Présent uniquement si l'instance a été arrêtée après réception de la requête. Au format exit_code=XXX, où XXX est un nombre à trois chiffres correspondant au motif d'arrêt de l'instance. Les codes de sortie ne sont pas documentés, car ils sont principalement destinés à aider Google à détecter et à résoudre les problèmes.
14 Estimated cost Oui OBSOLÈTE. Coût estimé de 1 000 requêtes de ce type, en USD. Exemple : cpm_usd=0.000046
15 Queue name Non Nom de la file d'attente de tâches utilisée. Présent uniquement si la requête utilise une file d'attente de tâches. Exemple : queue_name=default
16 Task name Non Nom de la tâche exécutée dans la file d'attente de tâches de cette requête. Présent uniquement si la requête entraîne la mise en file d'attente d'une tâche. Exemple : task_name=7287390692361099748
17 Pending queue Non Présent uniquement si une requête a passé un certain temps dans une file d'attente. Si ces requêtes sont nombreuses dans vos journaux et/ou si les valeurs sont élevées, cela peut indiquer qu'il vous faut davantage d'instances pour distribuer votre trafic. Exemple : pending_ms=195
18 Loading request Non Présent uniquement s'il s'agit d'une requête de chargement, c'est-à-dire qu'une instance a dû être démarrée. Dans l'idéal, vos instances doivent être opérationnelles et en bon état le plus longtemps possible afin de répondre à un grand nombre de requêtes avant d'être recyclées et de devoir être redémarrées. Ces requêtes ne devraient donc pas figurer en nombre dans vos journaux. Exemple : loading_request=1.
19 Instance Oui Identifiant unique de l'instance qui gère la requête. Exemple : instance=00c61b117cfeb66f973d7df1b7f4ae1f064d
20 Version Oui Version actuelle d'App Engine utilisée en production : 1.9.98

Quotas et limites

Votre application est affectée par les quotas de journaux suivants :

  • Données de journaux récupérées via l'API Logs
  • Quota d'ingestion et de conservation de journaux

Quota de données récupérées

Les 100 premiers mégaoctets de données de journaux récupérées par jour via les appels de l'API Logs sont gratuits. Les volumes de données supérieurs à 100 mégaoctets entraînent des frais de 0,12 $/Go.

Attribution d'un quota d'ingestion de journaux

La journalisation des applications App Engine est fournie par la suite Google Cloud Operations. Consultez les tarifs de la suite Google Cloud Operations pour plus d'informations sur les coûts et les limites de journalisation. Pour le stockage à long terme des journaux, vous pouvez exporter les journaux de la suite Google Cloud Operations vers Cloud Storage, BigQuery et Pub/Sub.