Habilita el Servicio de transferencia de datos de BigQuery

Para usar el Servicio de transferencia de datos de BigQuery, debes completar los siguientes pasos como propietario del proyecto:

• Crea un proyecto y habilita la API de BigQuery.
• Habilita el Servicio de transferencia de datos de BigQuery.

Para obtener más información sobre los roles de Identity and Access Management (IAM), consulta Comprende los roles en la documentación de IAM.

Nota: Si llamas a la API del Servicio de transferencia de datos de BigQuery de inmediato después de habilitar el Servicio de transferencia de datos de BigQuery de manera programática, debes implementar una llamada que se pueda reintentar con demoras de retirada entre llamadas consecutivas. Esto es necesario porque la habilitación de la API es asíncrona y está sujeta a retrasos de propagación causados por la coherencia eventual.

Crea un proyecto y habilita la API de BigQuery

Antes de usar el Servicio de transferencia de datos de BigQuery, debes crear un proyecto y, en la mayoría de los casos, habilitar la facturación para ese proyecto. Puedes usar un proyecto existente con el Servicio de transferencia de datos de BigQuery o bien crear uno nuevo. Si usas un proyecto existente, también necesitas habilitar la API de BigQuery.

Para crear un proyecto y habilitar la API de BigQuery:

1. In the Google Cloud console, go to the project selector page.

   Go to project selector

2. Select or create a Google Cloud project.

   Note: If you don't plan to keep the resources that you create in this procedure, create a project instead of selecting an existing project. After you finish these steps, you can delete the project, removing all resources associated with the project.

3. Habilita la facturación en todas las transferencias de tu proyecto. Se te cobrarán $0 por las transferencias gratuitas.

   Solo se requiere habilitar la facturación una vez por proyecto, incluso si transfieres datos desde varias fuentes. La facturación también debe estar habilitada para consultar los datos en BigQuery después de transferirlos.

   Obtén más información sobre cómo confirmar que la facturación esté habilitada en tu proyecto.

4. BigQuery se habilita automáticamente en proyectos nuevos. Para activar BigQuery en un proyecto existente, habilita la API de BigQuery.
   
   Habilita la API de BigQuery

Habilita el Servicio de transferencia de datos de BigQuery

Antes de realizar una transferencia, debes habilitar el Servicio de transferencia de datos de BigQuery. Para habilitar el Servicio de transferencia de datos de BigQuery, debes tener la función de propietario en tu proyecto.

Para habilitar el Servicio de transferencia de datos de BigQuery, sigue estos pasos:

1. Abre la página de la API de BigQuery Data Transfer en la biblioteca de API.

2. En el menú desplegable, selecciona el proyecto adecuado.

3. Haz clic en el botón HABILITAR.

   Habilita la API de transferencia de datos

Agente de servicio

El Servicio de transferencia de datos de BigQuery usa un agente de servicio para acceder a tus recursos y administrarlos. Esto incluye, entre otros, los siguientes recursos:

• Recuperar un token de acceso para que la cuenta de servicio use cuando se autorice la transferencia de datos.
• Publicación de notificaciones en el tema de Pub/Sub proporcionado si está habilitado
• Iniciar trabajos de BigQuery.

El agente de servicio se crea automáticamente en tu nombre después de que habilites el Servicio de transferencia de datos de BigQuery y uses la API por primera vez. Cuando se crea el agente de servicio, Google otorga el rol de agente de servicio predefinido de forma automática.

Autorización de cuenta de servicio entre proyectos

Si autorizas la transferencia de datos mediante una cuenta de servicio de un proyecto distinto del proyecto con el Servicio de transferencia de datos de BigQuery habilitado, debes otorgar el rol roles/iam.serviceAccountTokenCreator al agente de servicio mediante el siguiente comando de Google Cloud CLI:

gcloud iam service-accounts add-iam-policy-binding service_account \
--member serviceAccount:[e-mail] \
--role roles/iam.serviceAccountTokenCreator

Donde:

• service_account es la cuenta de servicio entre proyectos que se usa para autorizar la transferencia de datos.
• project_number es el número del proyecto en el que está habilitado el Servicio de transferencia de datos de BigQuery.

Para obtener más información sobre la configuración de recursos entre proyectos, consulta Configura un recurso en un proyecto diferente en la documentación de robo de identidad de la cuenta de servicio de Identity and Access Management.

Creación manual del agente de servicio

Si deseas activar la creación del agente de servicio antes de interactuar con la API, por ejemplo, si necesitas otorgar roles adicionales al agente de servicio, puedes usar uno de los siguientes enfoques:

• API: services.GenerateServiceIdentity
• gcloud CLI: gcloud beta services identity create
• Proveedor de Terraform: google_project_service_identity

Cuando activas de forma manual la creación del agente de servicio, Google no otorga el rol de agente de servicio predefinido de forma automática. Debes otorgar de forma manual al agente de servicio el rol predefinido mediante el siguiente comando de Google Cloud CLI:

gcloud projects add-iam-policy-binding project_number \
--member serviceAccount:[e-mail] \
--role roles/bigquerydatatransfer.serviceAgent

Donde:

• project_number es el número del proyecto en el que está habilitado el Servicio de transferencia de datos de BigQuery.

Advertencia: No revoques el rol de agente de servicio del agente de servicio. Si revocas el rol, el Servicio de transferencia de datos de BigQuery ya no funcionará.

Otorga acceso a bigquery.admin

Recomendamos otorgar el rol predefinido de IAM bigquery.admin a los usuarios que crean transferencias del Servicio de transferencia de datos de BigQuery. El rol bigquery.admin incluye los permisos de IAM necesarios para realizar las tareas más comunes. El rol de bigquery.admin incluye los siguientes permisos del Servicio de transferencia de datos de BigQuery:

• Permisos del Servicio de transferencia de datos de BigQuery:
  • bigquery.transfers.update
  • bigquery.transfers.get
• Permisos de BigQuery:
  • bigquery.datasets.get
  • bigquery.datasets.update
  • bigquery.jobs.create

Nota: Si rol bigquery.admin es demasiado amplio para un caso de uso específico, puedes crear un rol de IAM personalizado solo con los permisos necesarios.

En algunos casos, los permisos necesarios pueden diferir entre las diferentes fuentes de datos. Consulta la sección “Permisos necesarios” en cada guía de transferencia de fuentes de datos para obtener información específica de IAM. Por ejemplo, consulta Permisos de transferencia de Amazon S3 o Permisos de transferencia de Cloud Storage.

Para otorgar el rol bigquery.admin, haz lo siguiente:

Console

1. Abre la página de IAM en la consola de Google Cloud.

   Abrir la página IAM

2. Haz clic en Seleccionar un proyecto.

3. Selecciona un proyecto y haz clic en Abrir.

4. Haz clic en Agregar para agregar miembros nuevos al proyecto y configura sus permisos.

5. En el cuadro de diálogo Agregar miembros (Add members), haz lo siguiente:

   • En Miembros (Members), ingresa la dirección de correo electrónico del usuario o grupo.
   • En el menú desplegable Seleccionar una función, haz clic en BigQuery > Administrador de BigQuery (BigQuery > BigQuery Admin).

   • Haz clic en Agregar.

     

gcloud

Puedes usar Google Cloud CLI para otorgar el rol bigquery.admin a un usuario o grupo.

Para agregar una vinculación única a la política de IAM del proyecto, escribe el siguiente comando. Para agregar un usuario, proporciona la marca --member con el formato user:[e-mail]. Para agregar un grupo, proporciona la marca --member con el formato group:[e-mail].

gcloud projects add-iam-policy-binding project_id \
--member principal:address \
--role roles/bigquery.admin

Donde:

• project_id es el ID del proyecto.
• principal es group o user.
• address es la dirección de correo electrónico del usuario o del grupo.

Por ejemplo:

gcloud projects add-iam-policy-binding myproject \
--member group:[e-mail] \
--role roles/bigquery.admin

El comando genera la política actualizada:

    bindings:
    - members:
      - group:[e-mail]
        role: roles/bigquery.admin
    

Para obtener más información sobre las funciones de Cloud IAM en BigQuery, consulta Funciones y permisos predefinidos.

¿Qué sigue?

Una vez habilitado el Servicio de transferencia de datos de BigQuery, realiza una transferencia para tu fuente de datos.

• Amazon S3
• Amazon Redshift
• Azure Blob Storage
• Campaign Manager
• Cloud Storage
• Display & Video 360
• Anuncios de Facebook (vista previa)
• Google Ad Manager
• Google Ads
• Google Merchant Center (vista previa)
• Google Play
• Oracle (vista previa)
• Salesforce (vista previa)
• Salesforce Marketing Cloud (vista previa)
• Search Ads 360
• ServiceNow (vista previa)
• Teradata
• Canal de YouTube
• Propietario del contenido de YouTube