Las velocidades de transferencia se ven afectadas por factores como la ubicación y el proveedor de origen, los tamaños y la cantidad de archivos.
Si la transferencia avanza más lento de lo esperado, consulta la información de esta página para conocer los posibles motivos y soluciones.
Transferencias sin agentes
Para las transferencias a Cloud Storage desde Amazon S3, Microsoft Azure, listas de URL o Cloud Storage, el Servicio de transferencia de almacenamiento administra la transferencia sin la necesidad de agentes de transferencia alojados.
Crea varias transferencias paralelas
El Servicio de transferencia de almacenamiento tiene una cantidad máxima de consultas por segundo (QPS) permitidas por trabajo de transferencia. Si tu trabajo implica una gran cantidad de archivos relativamente pequeños, este límite de QPS limitará su velocidad de transferencia. La transferencia de un objeto puede activar operaciones de listas, lectura y escritura, cada una de las cuales se descuenta del máximo de QPS.
Para evitar el límite de QPS, divide tu transferencia grande en varios trabajos de transferencia.
Usa incluir y excluir prefijos para crear trabajos de transferencia que contengan menos archivos. Puedes crear hasta 1,000 trabajos de transferencia por día, con 200 trabajos activos en cualquier momento. Los trabajos adicionales se iniciarán de forma automática cuando la cantidad de trabajos activos sea inferior a 200.
Por ejemplo, para transferir solo archivos cuyo nombre de archivo o ruta de acceso comience con las letras de la a a la e, haz lo siguiente:
gcloud CLI
gcloud transfer jobs create SOURCE DESTINATION \
--include-prefixes="a,b,c,d,e"
REST
{
"description": "YOUR DESCRIPTION",
"status": "ENABLED",
"projectId": "PROJECT_ID",
"schedule": {
"scheduleStartDate": {
"day": 1,
"month": 1,
"year": 2015
},
"startTimeOfDay": {
"hours": 1,
"minutes": 1
}
},
"transferSpec": {
"gcsDataSource": {
"bucketName": "GCS_SOURCE_NAME"
},
"gcsDataSink": {
"bucketName": "GCS_SINK_NAME"
},
"transferOptions": {
"deleteObjectsFromSourceAfterTransfer": true
},
"objectConditions": {
"includePrefixes": [
"a","b","c","d","e"
],
"excludePrefixes": [
"path_1/subpath_2/object_5"
]
}
}
}
Transferencias basadas en agentes
Si deseas obtener sugerencias a fin de acelerar las transferencias basadas en agentes, consulta Prácticas recomendadas para las transferencias del sistema de archivos.