Diferenças entre as opções do serviço de transferência do Cloud Storage

Este documento resume as diferenças entre transferências do sistema de arquivos e transferências de origens de armazenamento de objetos na nuvem (Amazon S3, Azure Storage e Cloud Storage) ou listas de URLs para o Cloud Storage.

Recurso Armazenamento de objetos do Cloud para Cloud Storage Transferências do sistema de arquivos Observações
Agentes e pools de agentes Não Obrigatório

As transferências que envolvem sistemas de arquivos exigem agentes com acesso raiz ao sistema de arquivos. Os agentes são agrupados e gerenciados com pools de agentes.

Consulte Gerenciar pools de agentes para começar.

Sincronizar Opções para substituir objetos que existem no Cloud Storage Sem opção de substituição

O Serviço de transferência do Cloud Storage usa metadados de soma de verificação, quando possível, para detectar alterações entre objetos no sistema de armazenamento de origem e no Cloud Storage. Para sistemas de arquivos, o Storage Transfer Service usa a hora e o tamanho da última modificação do objeto de origem e os compara à última modificação e ao tamanho quando o objeto foi copiado pela última vez para o Cloud Storage.

Transferências de armazenamento de objetos do Cloud

Quando o Serviço de transferência do Cloud Storage detecta um objeto novo ou alterado no sistema de armazenamento de origem, ele copia o objeto completo para o Cloud Storage. É possível alterar esse comportamento. Assim, o Serviço de transferência do Cloud Storage substitui objetos pelo mesmo nome que existem no Cloud Storage, independentemente do estado alterado. Para mais informações, consulte TransferOptions.

Transferências do sistema de arquivos

Quando o Serviço de transferência do Cloud Storage detecta um objeto novo ou alterado no sistema de arquivos, ele copia o objeto completo para o Cloud Storage. Esse comportamento não pode ser alterado. Para copiar arquivos que existem no Cloud Storage, exclua os objetos correspondentes no bucket do Cloud Storage de destino ou escolha um novo prefixo para os objetos de destino.

Controle de largura de banda Sem suporte Compatível: é possível definir limites para todas as transferências no projeto em incrementos de MB/s
Monitoramento do pacote de operações do Google Cloud Sem suporte Compatível apenas para agentes Para transferências do Cloud para o Google Cloud, é possível pesquisar a API para ver o status, a velocidade e outras informações dos jobs de transferência. Para mais informações, consulte a descrição da API TransferJobs.
Registros de transferência Compatível. Consulte Configurar registros de transferência. Compatível. Ver um registro de todos os arquivos copiados e de todos os erros. Consulte Formato do registro de transferência.
Filtrar dados de origem com base em nomes Compatível: inclua e exclua prefixos de objetos de origem Sem suporte Para especificar um subconjunto de arquivos para uma transferência de sistemas de arquivos, crie um diretório temporário com apenas os arquivos que você quer transferir e inicie um job de transferência com esse diretório como origem.
Filtrar de dados de origem por hora de modificação Compatível: é possível incluir arquivos de origem com base na hora da última modificação Sem suporte Para especificar um subconjunto de arquivos para uma transferência de sistemas de arquivos, crie um diretório temporário com apenas os arquivos que você quer transferir e inicie um job de transferência com esse diretório como origem.
IAM
  • Papéis Administrador de transferência do Storage, Usuário de transferência do Storage e Leitor de transferência do Storage
  • Permissões personalizadas do IAM
Papéis Administrador de transferência do Storage e Usuário de transferência do Storage O Console do Cloud para o serviço de transferência do Storage não funcionará corretamente se o papel personalizado não tiver as permissões necessárias. Por exemplo, algumas partes do Console do Cloud supõem que o papel tenha acesso de leitura para exibir um item antes de editá-lo. Portanto, um papel com permissões somente de gravação não conseguirá acessar o Console do Cloud da maneira apropriada.