Contrôler un flux

Présentation

Datastream vous permet de surveiller les données et les événements traités par un flux. Ces informations apparaissent dans les graphiques suivants:

  • Débit : débit auquel Datastream traite les données ou les événements. Ce débit peut être :

    • La quantité de données (en Mo) que Datastream transfère de la source vers la destination.
    • Nombre d'événements associés aux données transférées. Un événement est une modification unique de la source, telle qu'une nouvelle ligne ajoutée à une table dans une base de données.

  • Événements non compatibles : nombre d'événements ne pouvant pas être traités de la source à la destination.

  • Fraîcheur des données: décalage entre les données résidant dans la source et celles transférées par le flux vers la destination. Il correspond au temps écoulé entre l'horodatage source et l'horodatage de lecture de l'événement le plus ancien en cours de traitement. S'il n'y a pas de nouvel événement à lire à partir de la source, la fraîcheur est définie sur 0.

    Si Datastream n'a pas encore traité des événements en file d'attente, ils ne sont pas pris en compte lors du calcul de la métrique de fraîcheur des données. Par exemple, en cas de pic de débit, il n'est reflété dans la métrique d'actualisation qu'une fois que Datastream a traité les événements à l'origine du pic.

  • Latence du système: temps nécessaire à Datastream pour traiter un événement. Cet intervalle correspond au délai entre le moment où Datastream lit l'événement et le moment où celui-ci est écrit dans la destination.

  • Latence totale : différence de temps entre le moment où les données sont écrites dans la source et celui où les événements correspondants sont écrits dans la destination.

Surveiller les données ou les événements traités

  1. Accédez à la page Flux de Google Cloud Console.

    Accéder à la page "Flux"

  2. Cliquez sur le flux que vous souhaitez surveiller.

  3. Facultatif. Faites défiler la page jusqu'à ce que le graphique Fraîcheur des données s'affiche. Pour ce graphique, cliquez sur le lien Créer une règle d'alerte afin de créer une règle d'alerte pour celle-ci. Une règle d'alerte décrit un ensemble de conditions que vous souhaitez surveiller pour le graphique.

    Une fois que vous avez cliqué sur le lien, la page Créer une règle d'alerte s'affiche dans Cloud Monitoring. Sur cette page, vous pouvez définir la règle d'alerte pour le graphique. Il s'agit, entre autres, de spécifier les critères de déclenchement de la règle, les personnes ou les personnes qui seront informées si les critères sont remplis et la manière dont elles seront informées.

    Pour en savoir plus sur les règles d'alerte, y compris sur leur création, consultez la page Gérer des règles d'alerte basées sur les métriques.

  4. Cliquez sur l'onglet SURVEILLANCE.

  5. Faites défiler la page jusqu'à ce que le graphique souhaité, qui représente les données ou événements surveillés par Datastream, s'affiche.

  6. Si vous le souhaitez, lorsque vous consultez le graphique Débit, sélectionnez (octets/s) pour afficher la quantité de données transférées par Datastream de la source à la destination, ou (événements/sec) pour voir le nombre d'événements associés aux données en cours de transfert.

  7. Pour afficher la quantité de données ou le nombre d'événements traités par Datastream sur une période de plusieurs heures ou de plusieurs jours, cliquez sur 1 heure, 6 heures, 12 heures, 1 jour, 2 jours, 4 jours, 7 jours, 14 jours ou 30 days.

    Pour définir une plage personnalisée, vous pouvez également sélectionner le menu Personnalisé, puis utiliser l'outil de sélection Agenda pour spécifier une date et heure de début et une date et heure de fin pour la quantité de données ou le nombre d'événements que vous souhaitez afficher.

    Datastream met à jour le graphique dans le volet pour refléter votre sélection et affiche l'intervalle que vous avez spécifié.

    Par exemple, si la date du jour est le 31 octobre 2021 et que vous cliquez sur 30 jours, le graphique affiche la quantité de données ou le nombre d'événements traités par DataStream depuis le 1er octobre 2021.

  1. Maintenez le pointeur sur la ligne du graphique pour afficher la quantité de données ou le nombre d'événements traités par Datastream à une date et une heure spécifiques.