Diferencias entre las opciones del Servicio de transferencia de almacenamiento

En este documento, se resumen las diferencias entre las transferencias del sistema de archivos y las transferencias de las fuentes de almacenamiento de objetos en la nube (Amazon S3, Azure Storage y Cloud Storage) o listas de URL a Cloud Storage.

Función Almacenamiento de objetos en la nube en Cloud Storage Transferencias del sistema de archivos Notas
Agentes y grupos de agentes No Obligatorio

Las transferencias que involucran sistemas de archivos requieren agentes con acceso raíz al sistema de archivos. Los agentes se agrupan y administran con grupos de agentes.

Consulta Administra grupos de agentes para comenzar.

Sincronizar Opciones para reemplazar los objetos que existen en Cloud Storage Sin opción de reemplazo

Cuando sea posible, el Servicio de transferencia de almacenamiento usa metadatos de suma de verificación para detectar cambios entre objetos en el sistema de almacenamiento de origen y Cloud Storage. Para los sistemas de archivos, el Servicio de transferencia de almacenamiento usa la última hora de modificación y el tamaño del objeto de origen, y los compara con la última hora de modificación y tamaño cuando se copió el objeto por última vez en Cloud Storage.

Transferencias de almacenamiento de objetos en la nube

Cuando el Servicio de transferencia de almacenamiento detecta un objeto nuevo o modificado en el sistema de almacenamiento de origen, copia el objeto completo en Cloud Storage. Puedes cambiar este comportamiento para que el Servicio de transferencia de almacenamiento reemplace objetos con el mismo nombre que existe en Cloud Storage independientemente del estado modificado. Para obtener más información, consulta TransferOptions.

Transferencias del sistema de archivos

Cuando el Servicio de transferencia de almacenamiento detecta un objeto nuevo o modificado en el sistema de archivos, copia el objeto completo en Cloud Storage. Este comportamiento no se puede cambiar. A fin de copiar los archivos que existen en Cloud Storage, borra los objetos correspondientes del bucket de destino de Cloud Storage o elige un prefijo nuevo para los objetos de destino.

Control de ancho de banda No compatible Compatible: Puede establecer límites en todas las transferencias del proyecto en incrementos de MB/s.
Supervisión del paquete de operaciones de Google Cloud No compatible Solo compatible con los agentes En Cloud a Google Cloud, puedes consultar la API para obtener el estado, la velocidad, etc., de tus trabajos de transferencia. Para obtener más información, consulta Descripción de la API de TransferJobs.
Registros de transferencia No compatible Compatible: Puedes ver un registro de todos los archivos copiados y cualquier error. Para ver los errores en las transferencias de Cloud a Google Cloud, puedes ver las muestras de error en Google Cloud Console.
Filtrado de datos de origen basado en nombres Compatible: Incluye y excluye prefijos para los objetos de origen No compatible A fin de especificar un subconjunto de archivos para una transferencia de sistema de archivo, debes crear un directorio de etapa de pruebas separado que solo contenga los archivos que deseas transferir y, luego, iniciar un trabajo de transferencia con ese directorio como fuente.
Filtrado de datos de origen de hora de modificación Compatible: Incluye archivos de origen según la hora de la última modificación No compatible A fin de especificar un subconjunto de archivos para una transferencia de sistema de archivo, debes crear un directorio de etapa de pruebas separado que solo contenga los archivos que deseas transferir y, luego, iniciar un trabajo de transferencia con ese directorio como fuente.
IAM
  • Funciones de Administrador de transferencia de almacenamiento, Usuario de transferencia de almacenamiento y Visualizador de transferencia de almacenamiento
  • Permisos de IAM personalizados
Funciones de Administrador de transferencia de almacenamiento y Usuario de transferencia de almacenamiento La consola de Cloud para el Servicio de transferencia de almacenamiento no funcionará correctamente si faltan permisos obligatorios en la función personalizada. Por ejemplo, algunas partes de la consola de Cloud suponen que la función tiene acceso de lectura para mostrar un elemento antes de editarlo, por lo que una función con permisos solo de escritura experimentará pantallas de la consola de Cloud que no funcionan.