Surveiller les jobs de transfert

Cloud Monitoring collecte et stocke automatiquement les informations pour vos tâches du service de transfert de stockage. Vous pouvez utiliser Cloud Monitoring pour représenter et surveiller toute une plage de métriques sous forme de graphiques:

Nombre d'objets trouvés et d'octets
Le nombre d'objets copiés et d'octets
Nombre d'objets supprimés et d'octets
Nombre d'erreurs et codes d'erreur associés

Cloud Monitoring est automatiquement activé pour le service de transfert de stockage. La collecte des données et l'affichage des métriques dans la console Google Cloud sont gratuits. Les appels d'API peuvent entraîner des frais. Consultez la page Tarifs de Cloud Monitoring pour en savoir plus.

Rôle IAM requis

Pour afficher les métriques dans Cloud Monitoring, vous devez disposer du rôle Lecteur Monitoring (roles/monitoring.viewer) ou des autorisations équivalentes.

Découvrez comment attribuer un rôle IAM.

Afficher les métriques

Les métriques Cloud Monitoring sont disponibles à deux emplacements dans la console Google Cloud:

La page d'informations de la tâche du service de transfert de stockage affiche les métriques d'une tâche de transfert spécifique. Outre les métriques listées ci-dessous, elle calcule la bande passante des octets copiés et le taux d'objets copiés.
La page Cloud Monitoring peut afficher les métriques d'une seule tâche de transfert, de plusieurs tâches ou de toutes les tâches d'un projet. Elle offre plusieurs options et personnalisations de graphique.

Afficher les métriques sur la page "Détails du job"

Pour afficher les métriques d'une tâche spécifique, procédez comme suit:

Accédez à la page Tâches de transfert dans la console Google Cloud.

Accéder à la page "Tâches de transfert"
Cliquez sur la tâche pour laquelle vous souhaitez afficher les métriques. La page Détails du job s'affiche.
Cliquez sur l'onglet Monitoring (Surveillance). Le tableau de bord par défaut s'affiche.

Afficher les métriques dans Cloud Monitoring

Pour afficher les métriques du service de transfert de stockage dans Cloud Monitoring, procédez comme suit:

Accédez à la page Explorateur de métriques dans la console Google Cloud.

Accéder à Monitoring: Explorateur de métriques
Suivez les instructions de la section Créer des graphiques avec l'Explorateur de métriques pour sélectionner et afficher vos métriques.

Détails de la ressource

Nom de la ressource surveillée: storage_transfer_job

Champ de ressource / Champ cible	Ressource et champ REST utilisés pour renseigner ce champ	Description
project_id	TransferJob.project_id	Identifiant du projet associé à cette ressource
job_id	TransferJob.name	Le nom unique du transfert
emplacement	La valeur sera toujours définie sur `global`, car les tâches de transfert ne sont associées à aucune région ni à aucun emplacement.	L'emplacement de la tâche de transfert

Détails de la métrique

Toutes les métriques du service de transfert de stockage sont des métriques delta. Ils mesurent l'évolution depuis le dernier enregistrement de la métrique. Par exemple, les métriques qui mesurent le nombre de requêtes sont des métriques delta. Chaque valeur enregistre le nombre de requêtes reçues depuis l'enregistrement du dernier point de données.

Les données sont échantillonnées toutes les 60 secondes. Après échantillonnage, les données ne sont pas visibles pendant un délai pouvant atteindre 180 secondes.

Les noms de métriques commencent tous par storagetransfer.googleapis.com/transferjob/. Exemple : storagetransfer.googleapis.com/transferjob/found_bytes_count.

Nom de la métrique	Étiquettes	Description
found_bytes_count	origin=[source \| sink]	Nombre d'octets trouvés dont le transfert ou la suppression est programmé, à l'exclusion de ceux filtrés en fonction des conditions de l'objet ou parce qu'ils existent déjà à la destination. Pour en savoir plus sur l'écrasement de données dans le récepteur, consultez la section TransferOptions. `TransferCounters` correspondant: bytesFoundFromSource, bytesFoundOnlyFrom récepteur
found_objects_count	origin=[source \| sink]	Nombre d'objets dont le transfert ou la suppression est programmé (à l'exclusion de ceux filtrés en fonction des conditions de l'objet ou ignorés en raison de la synchronisation). `TransferCounters` correspondant: objectFoundFromSource, objectFoundOnlyFrom plat
copied_bytes_count	status=[succeeded \| skipped \| failed]	Nombre d'octets copiés. `TransferCounters` correspondant: bytesCopedToReceiver, octetsFromSourceSkippedBySync, bytesFromSourceFailed La valeur de `copied_bytes_count` avec l'état `succeeded` ne correspond pas toujours au compteur `bytesCopiedToSink`, car la métrique compte également les octets copiés avec succès qui sont supprimés en cas d'échec. Par exemple, si le service de transfert de stockage copie 100 octets d'un objet supprimé en cours de transfert, ces 100 octets copiés sont enregistrés sous `copied_bytes_count` avec l'état `succeeded`. Les octets de l'objet complet sont également enregistrés sous `copied_bytes_count` avec l'état `failed`.
copied_objects_count	status=[succeeded \| skipped \| failed]	Nombre d'objets copiés. `TransferCounters` correspondant: objectCopedToReceiver, objectFromSourceSkippedBySync, objectFromSourceFailed
deleted_bytes_count	origin=[source \| sink] status=[succeeded \| failed]	Nombre d'octets supprimés. Le service de transfert de stockage peut être configuré pour supprimer des données au niveau de la source et/ou de la destination. Pour en savoir plus sur la configuration du comportement de suppression, consultez TransferOptions. `TransferCounters` correspondant: bytesdeletedFromSource, bytesRemoveFrom définie, bytesFromSourceFailed, bytesFailedToDeleteFromReceive Remarque: Ce compteur correspond à la somme de `deleted_bytes_count:status=failed,origin=source` et `copied_bytes_count:status=failed`.
deleted_objects_count	origin=[source \| sink] status=[succeeded \| failed]	Nombre d'objets supprimés. `TransferCounters` correspondant(s) : objectdeletedFromSource, objectdeletedFrom plat, objectFromSourceFailed, objetFailedToDeleteFrom plat. Remarque: Ce compteur correspond à la somme de `deleted_objects_count:status=failed,origin=source` et `copied_objects_count:status=failed`.
error_count	code=error code	Nombre d'erreurs tel que signalé dans ErrorSummary.