Présentation du service de transfert de stockage

Cette page décrit le service de transfert de stockage, que vous pouvez utiliser pour importer rapidement des données en ligne dans Cloud Storage ou transférer des données d'un bucket Cloud Storage vers un autre.

Pour apprendre à configurer un transfert dans la console GCP, suivez les instructions de la page Créer et gérer des transferts de données à l'aide de la console.

Qu'est-ce que le service de transfert de stockage ?

Ce service permet de transférer les données d'une source de données en ligne vers un récepteur de données. La source de données peut être un bucket Amazon S3 (Amazon Simple Storage Service), un emplacement HTTP/HTTPS ou un bucket Cloud Storage. Le récepteur de données (la destination) est toujours un bucket Cloud Storage.

Vous pouvez utiliser le service de transfert de stockage pour :

  • sauvegarder des données sur un bucket Cloud Storage appartenant à d'autres fournisseurs de stockage ;
  • déplacer les données d'un bucket de stockage multirégional vers un bucket de stockage Nearline pour réduire vos coûts de stockage.

Le service de transfert de stockage transfère des données au moyen d'une opération de transfert. Ces opérations sont planifiées et configurées via une tâche de transfert. Le service de transfert de stockage propose des options facilitant les transferts de données, et la synchronisation entre les sources et les récepteurs de données. Par exemple, vous pouvez :

  • planifier des opérations de transfert ponctuelles ou récurrentes ;
  • supprimer des objets existants du bucket de destination s'ils ne possèdent pas d'objets correspondant dans la source ;
  • supprimer les objets sources une fois leur transfert terminé ;
  • planifier la synchronisation périodique de la source et du récepteur de données grâce à des filtres avancés basés sur les dates de création des fichiers, les noms des fichiers et les heures de la journée auxquelles vous souhaitez importer les données.

Par défaut, le service de transfert de stockage copie un fichier de la source si celui-ci n'existe pas dans le récepteur ou si la version de la source diffère de celle du récepteur. Toujours par défaut, les fichiers sont conservés dans la source après le transfert.

Actuellement, le service de transfert de stockage ne fournit aucune garantie en ce qui concerne les performances ou la latence des tâches de transfert, et certaines fluctuations de performances sont à prévoir.

Qui peut utiliser le service de transfert de stockage ?

Pour disposer d'un accès complet au service de transfert de stockage, vous devez détenir le rôle EDITOR ou OWNER sur le projet où la tâche de transfert est créée. Si vous disposez du rôle VIEWER, vous pouvez afficher et répertorier les tâches et les opérations de transfert associées au récepteur de données.

Le projet où la tâche de transfert est créée ne doit pas nécessairement être associé aux buckets qui agissent en tant que source ou récepteur, mais des autorisations supplémentaires sont obligatoires pour configurer et utiliser les sources et les récepteurs. Consultez la page Configurer l'accès aux sources de données et aux récepteurs pour plus d'informations sur la procédure à suivre.

Interfaces disponibles

Vous pouvez travailler avec le service de transfert de stockage de différentes manières :

Faut-il utiliser gsutil ou le service de transfert de stockage ?

L'outil de ligne de commande gsutil vous permet également de transférer des données depuis Cloud Storage vers d'autres emplacements. Bien que gsutil soit compatible avec les buckets Amazon S3, et qu'il soit possible de transférer des données d'Amazon S3 vers Cloud Storage, le service de transfert de stockage est recommandé pour ce cas d'utilisation.

Pour décider si vous devez utiliser gsutil ou le service de transfert de stockage, suivez ces règles de base :

  • Lorsque vous transférez des données depuis un emplacement sur site, utilisez gsutil.
  • Lorsque vous transférez des données depuis l'emplacement d'un autre fournisseur de stockage dans le cloud, utilisez le service de transfert de stockage.
  • Sinon, évaluez les deux outils en fonction de votre scénario spécifique.

Utilisez ce guide comme point de départ. Les détails spécifiques de votre scénario de transfert vous aideront également à déterminer l'outil le plus approprié.

Cette page vous a-t-elle été utile ? Évaluez-la :

Envoyer des commentaires concernant…

Documentation sur le service de transfert de stockage Cloud Storage