Configura el acceso a una fuente: Microsoft Azure Storage

Puedes configurar el acceso a los datos de origen en Microsoft Azure Storage mediante firmas de acceso compartido (SAS).

Regiones admitidas

El Servicio de transferencia de almacenamiento puede transferir datos desde las siguientes regiones de Microsoft Azure Storage:

• América: Este de EE.UU., Este de EE.UU. 2, Oeste de EE.UU., Oeste de EE.UU. 2, Oeste de EE.UU. 3, Centro de EE.UU., Centro
• Asia-Pacífico: Australia Central, Australia Este, Australia Sudeste, India Central, India Meridional, India Occidental, Sudeste Asiático, Asia Oriental, Japón Este, Japón Oeste, Corea del Sur, Corea Central
• Europa, Oriente Medio y África (EMEA): Alemania Central, Catar Central, Emiratos Árabes Unidos, Norte de Sudáfrica, Norte de Europa, Oriente Medio, Reino Unido, Reino Unido, Catar Central, Emiratos Árabes Unidos y Sudáfrica

Configurar acceso

Sigue estos pasos para configurar el acceso a un contenedor de almacenamiento de Microsoft Azure:

1. Crea un usuario de Microsoft Azure Storage o usa uno existente para acceder a la cuenta de almacenamiento de tu contenedor de Microsoft Azure Storage Blob.

2. Cree un token SAS a nivel de contenedor. Consulta Concede acceso limitado a los recursos de Azure Storage mediante firmas de acceso compartido para obtener instrucciones.

   1. Los servicios permitidos deben incluir BLOB.

   2. En Tipos de recursos permitidos, selecciona Contenedor y Objeto.

   3. Los permisos permitidos deben incluir Read y List. Si la transferencia está configurada para borrar objetos del origen, también debes incluir el permiso Borrar.

   4. El tiempo de vencimiento predeterminado para los tokens SAS es de 8 horas. Establece un plazo de vencimiento razonable que te permita completar la transferencia de forma correcta.

   5. No especifiques ninguna dirección IP en el campo Direcciones IP permitidas. El Servicio de transferencia de almacenamiento usa varias direcciones IP y no admite restricciones de direcciones IP.

   6. Los Protocolos permitidos deben ser solo HTTPS.

3. Una vez que se crea el token, toma nota del valor del token SAS que se muestra. Necesitas este valor cuando configuras tu transferencia con el Servicio de transferencia de almacenamiento.

Precaución: Los tokens de SAS básicos no se pueden revocar, y la única forma de invalidar un token de SAS básico es quitar la clave de acceso al almacenamiento de tu cuenta. Recomendamos encarecidamente que cree tokens SAS a partir de políticas de acceso almacenado, de modo que pueda revocar una política para invalidar un token SAS. Para obtener más información, consulte Mejores prácticas al usar SAS.

Guarda tu token de SAS en Secret Manager

Secret Manager es un servicio seguro que almacena y administra datos sensibles, como contraseñas. Usa encriptación sólida, control de acceso basado en funciones y registro de auditoría para proteger tus secretos.

El Servicio de transferencia de almacenamiento puede usar Secret Manager para proteger tu token de Azure SAS. Debes cargar tu token en Secret Manager y, luego, pasar el nombre del recurso del Secret al Servicio de transferencia de almacenamiento.

Habilitar la API

Habilita la API de Secret Manager.

Habilita la API

Configura permisos adicionales

Permisos de usuario

El usuario que crea el secreto necesita el siguiente rol:

• Administrador de Secret Manager (roles/secretmanager.admin)

Obtén más información para otorgar una función.

Permisos del agente de servicio

El agente de servicio de Servicio de transferencia de almacenamiento requiere el siguiente rol de IAM:

• Descriptor de acceso a secretos de Secret Manager (roles/secretmanager.secretAccessor)

Para otorgarle el rol a tu agente de servicio, sigue estos pasos:

consola de Cloud

1. Sigue las instrucciones para recuperar el correo electrónico de tu agente de servicio.

2. Ve a la página de IAM en la consola de Google Cloud.

   Ir a IAM

3. Haz clic en Grant access.

4. En el cuadro de texto Principales nuevas, ingresa el correo electrónico del agente de servicio.

5. En el menú desplegable Selecciona una función, busca y selecciona Secret Manager Secret Accessor.

6. Haz clic en Guardar.

gcloud

Usa el comando gcloud projects add-iam-policy-binding para agregar la función de IAM al agente de servicio.

1. Sigue las instrucciones para recuperar el correo electrónico de tu agente de servicio.

2. Desde la línea de comandos, ingresa el siguiente comando:

   gcloud projects add-iam-policy-binding PROJECT_ID \
     --member='serviceAccount:SERVICE_AGENT_EMAIL' \
     --role='roles/secretmanager.secretAccessor'
   

Crea un secreto

Crea un secreto con Secret Manager:

consola de Cloud

1. Ve a la página Secret Manager en la consola de Google Cloud.

   Ir a Secret Manager

2. Haz clic en Crear secreto.

3. Ingresa un nombre.

4. En el cuadro de texto Valor del secreto, ingresa tus credenciales en el siguiente formato:

   {
     "sas_token" : "SAS_TOKEN_VALUE"
   }
   

5. Haz clic en Crear secreto.

6. Una vez que se haya creado el secreto, anota el nombre completo del recurso del secreto:

   1. Selecciona la pestaña Descripción general.

   2. Copia el valor de ID del recurso. Usa el siguiente formato:

      projects/1234567890/secrets/SECRET_NAME

gcloud

Para crear un secreto nuevo con la herramienta de línea de comandos de gcloud, pasa las credenciales con formato JSON al comando gcloud secrets create:

printf '{
  "sas_token" : "SAS_TOKEN_VALUE"
}' | gcloud secrets create SECRET_NAME --data-file=-

Recupera el nombre completo del recurso del secreto:

gcloud secrets describe SECRET_NAME

Anota el valor de name en la respuesta. Usa el siguiente formato:

projects/1234567890/secrets/SECRET_NAME

Si quieres obtener más información para crear y administrar secretos, consulta la documentación de Secret Manager.

Pasa tu secreto al comando de creación de trabajos

El uso de Secret Manager con el Servicio de transferencia de almacenamiento requiere el uso de la API de REST para crear un trabajo de transferencia.

Pasa el nombre del recurso de Secret Manager como el valor del campo transferSpec.azureBlobStorageDataSource.credentialsSecret:

POST https://storagetransfer.googleapis.com/v1/transferJobs

{
  "description": "Transfer with Secret Manager",
  "status": "ENABLED",
  "projectId": "PROJECT_ID",
  "transferSpec": {
    "azureBlobStorageDataSource": {
      "storageAccount": "AZURE_SOURCE_NAME",
      "container": "AZURE_CONTAINER",
      "credentialsSecret": "SECRET_RESOURCE_ID",
    },
    "gcsDataSink": {
      "bucketName": "CLOUD_STORAGE_BUCKET_NAME"
    }
  }
}

Restricciones de IP

Si restringes el acceso a tus recursos de Azure mediante un firewall de Azure Storage, debes agregar los rangos de IP que usan los trabajadores del Servicio de transferencia de almacenamiento a tu lista de IP permitidas.

Nota: Si usas agentes en lugar de una transferencia sin agentes, agrega las direcciones IP de la máquina del agente a la lista de entidades permitidas.

Debido a que estos rangos de IP pueden cambiar, publicamos los valores actuales como un archivo JSON en una dirección permanente:

https://www.gstatic.com/storage-transfer-service/ipranges.json

Cuando se agrega un rango nuevo al archivo, esperaremos al menos 7 días antes de usarlo para solicitudes del Servicio de transferencia de almacenamiento.

Te recomendamos que extraigas datos de este documento al menos una vez a la semana para mantener actualizada la configuración de seguridad. Para ver una secuencia de comandos de Python de muestra que recupera rangos de IP desde un archivo JSON, consulta este artículo de la documentación de la nube privada virtual.

Para agregar estos rangos como IP permitidas, sigue las instrucciones del artículo de Microsoft Azure Configura redes virtuales y firewalls de Azure Storage.