Ce document récapitule les différences entre les transferts de système de fichiers et les transferts depuis des sources de stockage d'objets cloud (Amazon S3, Azure Storage et Cloud Storage) ou des listes d'URL vers Cloud Storage.
Extraction | Stockage d'objets cloud dans Cloud Storage | Transferts du système de fichiers | Remarques |
---|---|---|---|
Agents et pools d'agents | Non | Requis | Les transferts impliquant des systèmes de fichiers nécessitent des agents disposant d'un accès racine au système de fichiers. Les agents sont regroupés et gérés avec des pools d'agents. Pour commencer, consultez Gérer les pools d'agents. |
Synchroniser | Options d'écrasement des objets existant dans Cloud Storage | Aucune option d'écrasement | Si possible, le service de transfert de stockage utilise des métadonnées de somme de contrôle pour détecter les modifications entre les objets du système de stockage source et de Cloud Storage. Pour les systèmes de fichiers, le service de transfert de stockage utilise la date et l'heure de dernière modification et la taille de l'objet source, et les compare à celles de dernière copie de l'objet dans Cloud Storage. Transferts de stockage d'objets cloud Lorsque le service de transfert de stockage détecte un nouvel objet ou un objet modifié sur le système de stockage source, il copie l'objet complet dans Cloud Storage. Vous pouvez modifier ce comportement de sorte que le service de transfert de stockage écrase les objets portant le même nom que dans Cloud Storage, quel que soit l'état. Pour en savoir plus, consultez la section TransferOptions. Transferts du système de fichiers Lorsque le service de transfert de stockage détecte un nouvel objet ou un objet modifié sur le système de fichiers, il copie l'objet complet dans Cloud Storage. Ce comportement n'est pas modifiable. Pour copier des fichiers qui existent dans Cloud Storage, supprimez les objets correspondants dans le bucket Cloud Storage de destination ou choisissez un nouveau préfixe pour les objets de destination. |
Contrôle de la bande passante | Non compatible | Compatible — peut définir des limites pour tous les transferts du projet, par incréments en Mo/s. | |
Monitoring dans la suite d'opérations de Google Cloud | Incompatible | Compatible uniquement avec les agents | Pour les transferts du Cloud vers Google Cloud, vous pouvez interroger l'API pour obtenir l'état, la vitesse, etc. de vos tâches de transfert. Pour en savoir plus, consultez la description de l'API TransferJobs. |
Journaux de transfert | Compatible Consultez la section Configurer les journaux de transfert. | Compatible Affichez un enregistrement de tous les fichiers copiés et de toute erreur. Consultez la section Format du journal de transfert. | |
Filtrage des données sources en fonction du nom | Compatible — préfixes d'inclusion et d'exclusion pour les objets sources | Incompatible | Pour spécifier un sous-ensemble de fichiers pour un transfert de système de fichiers, vous créez un répertoire de préproduction distinct contenant uniquement les fichiers que vous souhaitez transférer, puis démarrez une tâche de transfert avec ce répertoire en tant que source. |
Filtrage des données sources en fonction de la date et l'heure de modification | Compatible — inclut les fichiers sources en fonction de la date et l'heure de la dernière modification. | Non compatible | Pour spécifier un sous-ensemble de fichiers pour un transfert de système de fichiers, vous créez un répertoire de préproduction distinct contenant uniquement les fichiers que vous souhaitez transférer, puis démarrez une tâche de transfert avec ce répertoire en tant que source. |
IAM |
|
Rôles Administrateur du transfert de stockage et Utilisateur du transfert de stockage | Cloud Console ne fonctionnera pas correctement pour le service de transfert de stockage si le rôle personnalisé ne dispose pas des autorisations requises. Par exemple, certains outils de Cloud Console partent du principe que le rôle dispose d'un accès en lecture pour afficher un élément avant de le modifier. Par conséquent, les écrans de Cloud Console ne fonctionneront pas correctement pour un rôle doté uniquement d'autorisations en écriture. |