Abilita BigQuery Data Transfer Service

Per utilizzare BigQuery Data Transfer Service, devi completare i seguenti passaggi come Proprietario del progetto:

• Crea un progetto e abilita l'API BigQuery.
• Attivare BigQuery Data Transfer Service.

Per ulteriori informazioni sui ruoli IAM (Identity and Access Management), consulta Informazioni sui ruoli nella documentazione di IAM.

Nota: se chiami l'API BigQuery Data Transfer Service immediatamente dopo aver abilitato BigQuery Data Transfer Service in modo programmatico, devi implementare una chiamata irreversibile con ritardi di backoff tra chiamate consecutive. Questo è necessario perché l'abilitazione dell'API è asincrona e soggetta a ritardi di propagazione causati dall'eventuale coerenza.

Crea un progetto e abilita l'API BigQuery

Prima di utilizzare BigQuery Data Transfer Service, devi creare un progetto e, nella maggior parte dei casi, abilitare la fatturazione per il progetto. Puoi utilizzare un progetto esistente con BigQuery Data Transfer Service o crearne uno nuovo. Se utilizzi un progetto esistente, potresti dover abilitare anche l'API BigQuery.

Per creare un progetto e abilitare l'API BigQuery:

1. Nella console Google Cloud, vai alla pagina del selettore progetto.

   Vai al selettore progetti

2. Seleziona o crea un progetto Google Cloud.

   Nota: se non prevedi di conservare le risorse create in questa procedura, crea un progetto anziché selezionarne uno esistente. Dopo aver completato questi passaggi, puoi eliminare il progetto, rimuovendo tutte le risorse associate.

3. Abilita la fatturazione sul tuo progetto per tutti i trasferimenti. Ti verranno addebitati 0 $per i trasferimenti gratuiti.

   L'abilitazione della fatturazione è richiesta solo una volta per progetto, anche se trasferisci dati da più origini. La fatturazione deve essere abilitata anche per eseguire query sui dati in BigQuery, dopo il trasferimento dei dati.

   Scopri come verificare che la fatturazione sia abilitata nel tuo progetto.

4. BigQuery viene abilitato automaticamente nei nuovi progetti. Per attivare BigQuery in un progetto esistente, abilita l'API BigQuery.
   
   Abilitare l'API BigQuery

Abilita BigQuery Data Transfer Service

Prima di poter creare un trasferimento, devi attivare BigQuery Data Transfer Service. Per abilitare BigQuery Data Transfer Service, devi disporre del ruolo Proprietario per il tuo progetto.

Per abilitare BigQuery Data Transfer Service:

1. Apri la pagina dell'API BigQuery Data Transfer nella libreria API.

2. Dal menu a discesa, seleziona il progetto appropriato.

3. Fai clic sul pulsante ABILITA.

   Abilitare l'API Data Transfer

Agente di servizio

BigQuery Data Transfer Service utilizza un account di servizio gestito da Google noto come agente di servizio per accedere alle risorse e gestirle. Sono incluse, a titolo esemplificativo, le seguenti risorse:

• Recupero di un token di accesso per l'account di servizio da utilizzare durante l'autorizzazione del trasferimento di dati.
• Pubblicazione delle notifiche nell'argomento Pub/Sub fornito, se abilitata.
• Avvio dei job BigQuery.

L'agente di servizio viene creato automaticamente per tuo conto la prima volta che utilizzi l'API dopo aver abilitato BigQuery Data Transfer Service. Al momento della creazione dell'agente di servizio, Google concede automaticamente il ruolo di agente di servizio predefinito.

Autorizzazione account di servizio tra progetti

Se autorizzi il trasferimento di dati utilizzando un account di servizio di un progetto diverso da quello con BigQuery Data Transfer Service abilitato, devi concedere il ruolo roles/iam.serviceAccountTokenCreator all'agente di servizio utilizzando il seguente comando Google Cloud CLI:

gcloud iam service-accounts add-iam-policy-binding service_account \
--member serviceAccount:[e-mail] \
--role roles/iam.serviceAccountTokenCreator

Dove:

• service_account è l'account di servizio tra progetti utilizzato per autorizzare il trasferimento di dati.
• project_number è il numero del progetto in cui BigQuery Data Transfer Service è abilitato.

Per ulteriori informazioni sulla configurazione delle risorse tra progetti, consulta la sezione Configurazione per una risorsa in un progetto diverso nella documentazione sulla rappresentazione degli account di servizio Identity and Access Management.

Creazione manuale dell'agente di servizio

Se vuoi attivare la creazione dell'agente di servizio prima di interagire con l'API, ad esempio se devi concedere ruoli aggiuntivi all'agente di servizio, puoi utilizzare uno dei seguenti approcci:

• API: services.GenerateServiceIdentity
• gcloud CLI: gcloud beta services identity create
• Provider Terraform: google_project_service_identity

Quando attivi manualmente la creazione dell'agente di servizio, Google non concede automaticamente il ruolo di agente di servizio predefinito. Devi concedere manualmente all'agente di servizio il ruolo predefinito utilizzando il seguente comando Google Cloud CLI:

gcloud projects add-iam-policy-binding project_number \
--member serviceAccount:[e-mail] \
--role roles/bigquerydatatransfer.serviceAgent

Dove:

• project_number è il numero del progetto in cui BigQuery Data Transfer Service è abilitato.

Avviso: non revocare il ruolo dell'agente di servizio all'agente di servizio. Se revochi il ruolo, BigQuery Data Transfer Service non funzionerà più.

Concedi l'accesso a bigquery.admin

Ti consigliamo di concedere il ruolo IAM predefinito bigquery.admin agli utenti che creano trasferimenti di BigQuery Data Transfer Service. Il ruolo bigquery.admin include le autorizzazioni IAM necessarie per eseguire le attività più comuni. Il ruolo bigquery.admin include le seguenti autorizzazioni di BigQuery Data Transfer Service:

• Autorizzazioni di BigQuery Data Transfer Service:
  • bigquery.transfers.update
  • bigquery.transfers.get
• Autorizzazioni BigQuery:
  • bigquery.datasets.get
  • bigquery.datasets.update
  • bigquery.jobs.create

Nota: se il ruolo bigquery.admin è troppo ampio per un caso d'uso specifico, puoi creare un ruolo IAM personalizzato solo con le autorizzazioni necessarie.

In alcuni casi, le autorizzazioni richieste potrebbero variare a seconda dell'origine dati. Per informazioni specifiche su IAM, consulta la sezione "Autorizzazioni richieste" in ogni guida al trasferimento delle origini dati. Ad esempio, consulta Autorizzazioni di trasferimento Amazon S3 o Autorizzazioni di trasferimento Cloud Storage.

Per concedere il ruolo bigquery.admin:

Console

1. Apri la pagina IAM nella console Google Cloud

   Apri la pagina IAM

2. Fai clic su Seleziona un progetto.

3. Seleziona un progetto e fai clic su Apri.

4. Fai clic su Aggiungi per aggiungere nuovi membri al progetto e impostare le relative autorizzazioni.

5. Nella finestra di dialogo Aggiungi membri:

   • In Membri, inserisci l'indirizzo email dell'utente o del gruppo.
   • Nel menu a discesa Seleziona un ruolo, fai clic su BigQuery > Amministratore BigQuery.

   • Fai clic su Aggiungi.

     

gcloud

Puoi utilizzare Google Cloud CLI per concedere a un utente o a un gruppo il ruolo bigquery.admin.

Per aggiungere una singola associazione al criterio IAM del progetto, digita il seguente comando. Per aggiungere un utente, fornisci il flag --member nel formato user:[e-mail]. Per aggiungere un gruppo, fornisci il flag --member nel formato group:[e-mail].

gcloud projects add-iam-policy-binding project_id \
--member principal:address \
--role roles/bigquery.admin

Dove:

• project_id è l'ID progetto.
• principal è group o user.
• address è l'indirizzo email dell'utente o del gruppo.

Ad esempio:

gcloud projects add-iam-policy-binding myproject \
--member group:[e-mail] \
--role roles/bigquery.admin

Il comando restituisce il criterio aggiornato:

    bindings:
    - members:
      - group:[e-mail]
        role: roles/bigquery.admin
    

Per ulteriori informazioni sui ruoli IAM in BigQuery, consulta Autorizzazioni e ruoli predefiniti.

Passaggi successivi

Dopo aver abilitato BigQuery Data Transfer Service, crea un trasferimento per l'origine dati.

• Amazon S3
• Amazon Redshift
• Archiviazione BLOB di Azure
• Campaign Manager
• Cloud Storage
• Display & Video 360 (anteprima)
• Facebook Ads (anteprima)
• Google Ad Manager
• Google Ads
• Google Merchant Center (anteprima)
• Google Play
• Oracle (anteprima)
• Salesforce (anteprima)
• Salesforce Marketing Cloud (anteprima)
• Search Ads 360
• ServiceNow (anteprima)
• Teradata
• Canale YouTube
• Proprietario dei contenuti YouTube