Contrôler un flux

Vous pouvez utiliser Datastream pour surveiller les données et les événements traités par un flux. Ces informations s'affichent dans les graphiques suivants:

  • Débit : débit auquel Datastream traite les données ou les événements. Ce débit peut être :

    • La quantité de données (en Mo) que Datastream transfère de la source vers la destination.

    • Nombre d'événements associés aux données transférées. Un événement est une modification unique dans la source, comme l'ajout d'une ligne à une table dans une base de données.

  • Événements non compatibles : nombre d'événements ne pouvant pas être traités de la source à la destination.

  • Fraîcheur des données: différence de temps entre les données résidant dans la source et celles qui sont transférées vers la destination par le flux. Il correspond au temps écoulé entre le code temporel source et le code temporel de lecture de l'événement le plus ancien traité. Si aucun nouvel événement n'est à lire à partir de la source, la fraîcheur est définie sur 0.

    Si des événements sont mis en file d'attente et que Datastream ne les a pas encore traités, ils ne sont pas pris en compte lorsque Datastream calcule la métrique de fraîcheur des données. Par exemple, si le débit augmente brusquement, cela ne se reflète dans la métrique de fraîcheur qu'après que Datastream a traité les événements à l'origine de cette hausse.

  • Latence du système: temps nécessaire à Datastream pour traiter un événement. Cet intervalle correspond au temps écoulé entre la lecture de l'événement par Datastream et son écriture dans la destination.

  • Latence totale : différence de temps entre le moment où les données sont écrites dans la source et celui où les événements correspondants sont écrits dans la destination.

Surveiller les données ou les événements traités

  1. Accédez à la page Flux de Google Cloud Console.

    Accéder à la page "Flux"

  2. Cliquez sur le flux que vous souhaitez surveiller.

  3. Facultatif. Faites défiler la page jusqu'à ce que le graphique Fraîcheur des données s'affiche. Pour ce graphique, cliquez sur le lien Créer une règle d'alerte pour créer une règle d'alerte. Une règle d'alerte décrit un ensemble de conditions que vous souhaitez surveiller pour le graphique.

    Après avoir cliqué sur le lien, la page Créer une règle d'alerte s'affiche dans Cloud Monitoring. Sur cette page, vous pouvez définir la règle d'alerte pour le graphique. Vous devez notamment spécifier les critères qui déclencheront la règle, les personnes qui seront averties si ces critères sont remplis et la manière dont elles seront averties.

    Pour en savoir plus sur les règles d'alerte, y compris sur leur création, consultez Gérer les règles d'alerte basées sur des métriques.

  4. Cliquez sur l'onglet SURVEILLANCE.

  5. Faites défiler la page jusqu'à ce que le graphique souhaité s'affiche, représentant les données ou les événements que Datastream surveille.

  6. Si vous le souhaitez, lorsque vous consultez le graphique Débit, sélectionnez (octets/s) pour afficher la quantité de données transférées par Datastream de la source à la destination, ou (événements/sec) pour voir le nombre d'événements associés aux données en cours de transfert.

  7. Pour afficher la quantité de données ou le nombre d'événements traités par Datastream sur une période de plusieurs heures ou de plusieurs jours, cliquez sur 1 heure, 6 heures, 12 heures, 1 jour, 2 jours, 4 jours, 7 jours, 14 jours ou 30 days.

    Pour définir une plage personnalisée, vous pouvez également sélectionner le menu Personnalisé, puis utiliser l'outil de sélection Agenda pour spécifier une date et heure de début et une date et heure de fin pour la quantité de données ou le nombre d'événements que vous souhaitez afficher.

    Datastream met à jour le graphique du volet pour refléter votre sélection et affiche l'intervalle que vous avez spécifié.

    Par exemple, si la date du jour est le 31 octobre 2021 et que vous cliquez sur 30 jours, le graphique affiche la quantité de données ou le nombre d'événements traités par DataStream depuis le 1er octobre 2021.

  1. Maintenez le pointeur sur la ligne du graphique pour afficher la quantité de données ou le nombre d'événements traités par Datastream pour une date et une heure spécifiques.

Étape suivante