Contrôler un flux

Présentation

Vous pouvez utiliser Datastream pour surveiller les données et les événements traités par un flux. Ces informations s'affichent dans les graphiques suivants :

  • Débit : débit auquel Datastream traite les données ou les événements. Ce débit peut être :

    • La quantité de données (en Mo) que Datastream transfère de la source vers la destination.

    • Nombre d'événements associés aux données transférées. Un événement est une modification unique dans la source, comme l'ajout d'une ligne à une table dans une base de données.

  • Événements non compatibles : nombre d'événements ne pouvant pas être traités de la source à la destination.

  • Fraîcheur des données: décalage entre les données résidant dans la source et celles transférées vers la destination par le flux. Il correspond au temps écoulé entre le code temporel source et le code temporel de lecture de l'événement le plus ancien traité. Si aucun nouvel événement à lire à partir de la source n'est disponible, la fraîcheur est définie sur 0.

    Si Datastream n'a pas encore traité des événements en file d'attente, ils ne sont pas pris en compte lors du calcul de la métrique de fraîcheur des données. Par exemple, si le débit augmente brusquement, cela ne se reflète dans la métrique de fraîcheur qu'après que Datastream a traité les événements à l'origine de cette hausse.

  • Latence du système: temps nécessaire à Datastream pour traiter un événement. Cet intervalle correspond au temps écoulé entre le moment où Datastream lit et quand il est écrit dans la destination.

  • Latence totale : différence de temps entre le moment où les données sont écrites dans la source et celui où les événements correspondants sont écrits dans la destination.

Surveiller les données ou les événements traités

  1. Accédez à la page Flux de Google Cloud Console.

    Accéder à la page "Flux"

  2. Cliquez sur le flux que vous souhaitez surveiller.

  3. Facultatif. Faites défiler la page jusqu'à ce que le graphique Fraîcheur des données s'affiche. Pour ce graphique, cliquez sur le lien Créer une règle d'alerte pour créer une règle d'alerte. Une règle d'alerte décrit un ensemble de conditions que vous souhaitez surveiller pour le graphique.

    Après avoir cliqué sur le lien, la page Créer une règle d'alerte s'affiche dans Cloud Monitoring. Sur cette page, vous pouvez définir la règle d'alerte pour le graphique. Vous devez notamment spécifier les critères qui déclencheront la règle, les personnes qui seront averties si ces critères sont remplis et la manière dont elles seront averties.

    Pour en savoir plus sur les règles d'alerte, y compris sur leur création, consultez Gérer les règles d'alerte basées sur des métriques.

  4. Cliquez sur l'onglet SURVEILLANCE.

  5. Faites défiler la page jusqu'à ce que s'affiche le graphique souhaité, qui représente les données ou les événements surveillés par Datastream.

  6. Si vous le souhaitez, lorsque vous consultez le graphique Débit, sélectionnez (octets/s) pour afficher la quantité de données transférées par Datastream de la source à la destination, ou (événements/sec) pour voir le nombre d'événements associés aux données en cours de transfert.

  7. Pour afficher la quantité de données ou le nombre d'événements traités par Datastream sur une période de plusieurs heures ou de plusieurs jours, cliquez sur 1 heure, 6 heures, 12 heures, 1 jour, 2 jours, 4 jours, 7 jours, 14 jours ou 30 days.

    Pour définir une plage personnalisée, vous pouvez également sélectionner le menu Personnalisé, puis utiliser l'outil de sélection Agenda pour spécifier une date et heure de début et une date et heure de fin pour la quantité de données ou le nombre d'événements que vous souhaitez afficher.

    Datastream met à jour le graphique dans le volet pour refléter votre sélection et affiche l'intervalle que vous avez spécifié.

    Par exemple, si la date du jour est le 31 octobre 2021 et que vous cliquez sur 30 jours, le graphique affiche la quantité de données ou le nombre d'événements traités par DataStream depuis le 1er octobre 2021.

  1. Maintenez le pointeur sur la ligne du graphique pour afficher la quantité de données ou le nombre d'événements traités par Datastream pour une date et une heure spécifiques.

Étape suivante