Crea ambienti di sviluppo

Questa guida rapida illustra i passaggi per creare modelli di sviluppo individuali ambienti in Dataform, in modo che ogni sviluppatore possa lavorare in autonomia di sviluppo software:

Prima di iniziare

  1. Accedi al tuo account Google Cloud. Se non conosci Google Cloud, crea un account per valutare le prestazioni dei nostri prodotti in scenari reali. I nuovi clienti ricevono anche 300 $di crediti gratuiti per l'esecuzione, il test e il deployment dei carichi di lavoro.

  2. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

    Go to project selector

  3. Assicurati che la fatturazione sia attivata per il tuo progetto Google Cloud.

  4. Abilita le API BigQuery and Dataform.

    Abilita le API

    5.

  5. In the Google Cloud console, on the project selector page, select or create a Google Cloud project.

    Go to project selector

  6. Assicurati che la fatturazione sia attivata per il tuo progetto Google Cloud.

  7. Abilita le API BigQuery and Dataform.

    Abilita le API

    8.

Ruoli obbligatori

Per ottenere le autorizzazioni necessarie per eseguire tutte le attività in questo tutorial: chiedi all'amministratore di concederti i seguenti ruoli IAM sul tuo progetto:

  • Amministratore Dataform (roles/dataform.admin) - repository
  • Editor Dataform (roles/dataform.editor) - aree di lavoro e chiamate del flusso di lavoro

Per saperne di più sulla concessione dei ruoli, consulta Gestire l'accesso.

Potresti anche riuscire a ottenere le autorizzazioni richieste tramite la ruoli o altri ruoli predefiniti ruoli.

Crea un repository Dataform

  1. Nella console Google Cloud, vai alla pagina Dataform.

    Vai a Dataform

  2. Fai clic su Crea repository.

  3. Nella pagina Crea repository, segui questi passaggi:

    1. Nel campo ID repository, inserisci quickstart-dev.

    2. Nell'elenco Regione, seleziona europe-west4.

    3. Fai clic su Crea.

  4. Fai clic su Fine.

Concedi l'accesso Dataform a BigQuery

Per eseguire flussi di lavoro in BigQuery, il Dataform l'account di servizio deve avere i seguenti ruoli obbligatori:

  • Editor dati BigQuery sui progetti per i quali Dataform ha bisogno dell'accesso in lettura e in scrittura. Loro di solito includono il progetto che ospita il repository Dataform.
  • Visualizzatore dati BigQuery sui progetti a cui Dataform ha bisogno dell'accesso in sola lettura.
  • Utente job BigQuery del progetto che ospita il tuo repository Dataform.

Per concedere questi ruoli:

  1. Nella console Google Cloud, vai alla pagina IAM.

    Vai alla pagina IAM

  2. Fai clic su Aggiungi.

  3. Nel campo Nuove entità, inserisci il servizio Dataform dell'account di servizio.

  4. Nell'elenco a discesa Seleziona un ruolo, seleziona la Ruolo Utente job BigQuery.

  5. Fai clic su Aggiungi un altro ruolo e poi nel menu a discesa Seleziona un ruolo. seleziona il ruolo Editor dati BigQuery.

  6. Fai clic su Aggiungi un altro ruolo e poi nel menu a discesa Seleziona un ruolo. seleziona il ruolo Visualizzatore dati BigQuery.

  7. Fai clic su Salva.

Configura gli override di compilazione dell'area di lavoro

Per creare ambienti di sviluppo isolati con l'area di lavoro Dataform le sostituzioni delle compilazioni:

  1. Nella console Google Cloud, vai alla pagina Dataform.

    Vai a Dataform

  2. Fai clic su quickstart-dev.

  3. Fai clic su Impostazioni e poi su Modifica.

  4. Nel riquadro Override di compilazione dell'area di lavoro, nel campo Suffisso schema, inserisci ${workspaceName}.

    Quando attivi l'esecuzione in un'area di lavoro, Dataform aggiunge nome dell'area di lavoro come suffisso dello schema predefinito impostato in impostazioni del flusso di lavoro. Questa guida rapida utilizza il formato Dataform predefinito impostazioni con lo schema predefinito dataform.

  5. Fai clic su Salva.

Dataform applica gli override di compilazione delle aree di lavoro a tutte le aree di lavoro in nel tuo repository.

Con questa configurazione, quando esegui manualmente un flusso di lavoro SQL Workspace, Dataform lo esegue con override di compilazione dell'area di lavoro. Di conseguenza, Dataform esegue il flusso di lavoro SQL nello schema dataform_workspaceName in BigQuery, trasformando dell'area di lavoro in un ambiente di sviluppo isolato.

Ad esempio, quando attivi manualmente l'esecuzione in un'area di lavoro sasha, Dataform esegue il flusso di lavoro SQL nello schema dataform_sasha in in BigQuery.

Per eseguire flussi di lavoro SQL senza override della compilazione dell'area di lavoro, ma mantieni di compilazione delle aree di lavoro per gli ambienti di sviluppo, puoi creare configurazioni di release per configurare altri ambienti di esecuzione, ad esempio staging e production.

Esegui la pulizia

Per evitare che al tuo account Google Cloud vengano addebitati costi per le risorse utilizzate in questa pagina, segui questi passaggi.

Elimina i set di dati creati in BigQuery

Per evitare che ti vengano addebitati costi per gli asset BigQuery, elimina i set di dati con nomi che iniziano con dataform, ad esempio dataform-sasha.

  1. Nella console Google Cloud, vai alla pagina BigQuery.

    Vai a BigQuery

  2. Nel riquadro Spazio di esplorazione, espandi il progetto e seleziona un set di dati.

  3. Fai clic sul menu Azioni e seleziona Elimina.

  4. Nella finestra di dialogo Elimina set di dati, inserisci delete nel campo, quindi fai clic su Elimina.

Elimina il repository Dataform

Non sono previsti costi per la creazione di repository di Dataform. Tuttavia, se vuoi eliminare un repository e tutti i suoi contenuti, segui questi passaggi: passaggi:

  1. Nella console Google Cloud, vai alla pagina Dataform.

    Vai a Dataform

  2. Entro quickstart-dev, fai clic sul menu Altro e quindi seleziona Elimina.

    1. Nella finestra Elimina repository, inserisci il nome del repository per confermare l'eliminazione.

  3. Per confermare, fai clic su Elimina.

Passaggi successivi