Prenota capacità BI Engine

Quando usi BigQuery BI Engine, gli addebiti si basano sulla capacità di BI Engine acquistata per il progetto. Le prenotazioni vengono addebitate in GB/ora, con prezzi per regione in base ai prezzi on demand. Se hai un impegno basato sulla capacità, avrai diritto a uno sconto fino al 100% in base all'impegno attivo. Per maggiori dettagli, consulta i prezzi basati sulla capacità.

Puoi acquistare capacità di BigQuery BI Engine creando una prenotazione. La prenotazione è collegata a un progetto che identifichi quando viene creata la prenotazione. BI Engine utilizza questa capacità per determinare la quantità di dati che possono essere memorizzati nella cache. Per saperne di più sulla dimensione massima di prenotazione per BI Engine, consulta Quote e limiti.

Ruoli obbligatori

Per ottenere le autorizzazioni necessarie per creare ed eliminare le prenotazioni, chiedi all'amministratore di concederti il ruolo IAM Amministratore risorse BigQuery (roles/bigquery.resourceAdmin) per il progetto. Per saperne di più sulla concessione dei ruoli, consulta Gestire l'accesso.

Potresti anche riuscire a ottenere le autorizzazioni richieste tramite i ruoli personalizzati o altri ruoli predefiniti.

Crea una prenotazione

Per prenotare capacità di BI Engine on demand, segui questi passaggi:

Console

  1. Nella pagina BigQuery, in Amministrazione, vai alla pagina BI Engine.

    Vai a BI Engine

  2. Fai clic su Crea prenotazione.

  3. Nella pagina Crea prenotazione, per il Passaggio 1:

    • Verifica il nome del progetto.
    • Scegli la tua località. La località deve corrispondere a quella dei set di dati su cui esegui la query.
    • Regola il cursore fino alla quantità di memoria che hai prenotato. Nell'esempio seguente viene impostata la capacità su 2 GB. Attualmente il massimo è 250 GB. Puoi richiedere un aumento della capacità massima di prenotazione per i tuoi progetti. Gli aumenti delle prenotazioni sono disponibili nella maggior parte delle regioni e l'elaborazione può richiedere da 3 giorni a una settimana.

      Località capacità BI Engine

  4. Fai clic su Avanti.

  5. (Facoltativo) Tabelle preferite. Le tabelle preferite ti consentono di limitare l'accelerazione di BI Engine a un insieme specificato di tabelle. Tutte le altre tabelle utilizzano normali slot BigQuery.

    Nel campo ID tabella, specifica la tabella da accelerare utilizzando il pattern: PROJECT.DATASET.TABLE.

    Sostituisci quanto segue:

    • PROJECT: l'ID del tuo progetto Google Cloud
    • DATASET: il set di dati
    • TABLE: la tabella su cui vuoi accelerare
  6. Fai clic su Avanti.

  7. Per il Passaggio 3, esamina i dettagli della prenotazione e poi fai clic su Crea.

Dopo aver confermato la prenotazione, i dettagli vengono visualizzati nella pagina Prenotazioni.

SQL

Utilizza l'istruzione DDL ALTER BI_CAPACITY SET OPTIONS per creare o modificare una prenotazione BI Engine.

  1. Nella console Google Cloud, vai alla pagina BigQuery.

    Vai a BigQuery

  2. Nell'editor query, inserisci la seguente istruzione:

    ALTER BI_CAPACITY `PROJECT_ID.LOCATION_ID.default`
    SET OPTIONS (
      size_gb = VALUE,
      preferred_tables =
        [`TABLE_PROJECT_ID.DATASET.TABLE1`,
        `TABLE_PROJECT_ID.DATASET.TABLE2`]);
    

    Sostituisci quanto segue:

    • PROJECT_ID: l'ID facoltativo del progetto che beneficerà dell'accelerazione BI Engine. Se omesso, viene utilizzato il progetto predefinito.
    • LOCATION_ID: la località in cui i dati devono essere memorizzati nella cache, con prefisso region-. Esempi: region-us, region-us-central1.
    • VALUE: la dimensione INT64 della prenotazione per la capacità di BI Engine in gigabyte, da 1 a 250 GB. Puoi richiedere un aumento della capacità massima di prenotazione per i tuoi progetti. Gli aumenti delle prenotazioni sono disponibili nella maggior parte delle regioni e l'elaborazione può richiedere da 3 giorni a una settimana. L'impostazione di VALUE sostituisce il valore esistente, se presente. Se è impostato su NULL, il valore dell'opzione viene cancellato.
    • TABLE_PROJECT_ID.DATASET.TABLE: l'elenco facoltativo di tabelle di riferimento a cui deve essere applicata l'accelerazione. Formato: TABLE_PROJECT_ID.DATASET.TABLE or DATASET.TABLE. Se il progetto viene omesso, viene utilizzato il progetto predefinito.

  3. Fai clic su Esegui.

Per ulteriori informazioni su come eseguire le query, vedi Eseguire una query interattiva.

bq

Utilizza il comando bq update e fornisci l'istruzione DDL (Data Definition Language) come parametro di query:

bq --project_id=PROJECT_ID update \
    --bi_reservation_size=SIZE \
    --location=LOCATION \
    --reservation

Sostituisci quanto segue:

  • PROJECT_ID: l'ID del progetto
  • SIZE: la capacità di memoria di prenotazione in gigabyte, da 1 a 250 GB. Puoi richiedere un aumento della capacità massima di prenotazione per i tuoi progetti. Gli aumenti delle prenotazioni sono disponibili nella maggior parte delle regioni e l'elaborazione può richiedere da 3 giorni a una settimana.
  • LOCATION: posizione del set di dati su cui esegui la query

Stima e misura la capacità

Per stimare i requisiti di capacità per una prenotazione di BI Engine, segui questi passaggi:

  1. Visualizza la vista TOTAL_LOGICAL_BYTES per determinare le dimensioni logiche della tabella e utilizzale per la prenotazione iniziale di BI Engine. Ad esempio:

    SELECT
      SUM(TOTAL_LOGICAL_BYTES) / 1024.0 / 1024.0 / 1024.0 AS logical_size_gb
    FROM
      `region-us.INFORMATION_SCHEMA.TABLE_STORAGE`
    WHERE
      TABLE_NAME IN UNNEST(["Table1", "Table2"]);
    

    Ad esempio, per le query su un insieme di tabelle che contengono un totale di 200 GiB di dati, come best practice puoi iniziare con una prenotazione BI Engine di 200 GiB. Le query più selettive che utilizzano solo un sottoinsieme di campi o partizioni disponibili potrebbero iniziare con dimensioni di prenotazione inferiori.

  2. Eseguire tutte le query che devono essere ottimizzate e che sono state create nello stesso progetto e nella stessa regione della prenotazione di BI Engine. L'obiettivo è approssimare il carico di lavoro da ottimizzare. Il maggiore carico richiede più memoria per gestire le query. I dati vengono caricati in BI Engine dopo la ricezione della query.

  3. Confronta la prenotazione della RAM di BI Engine con il numero di byte utilizzati, reservation/used_bytes nelle metriche bigquerybiengine di Cloud Monitoring.

  4. Modifica la capacità di prenotazione in base ai risultati. In molti casi d'uso, una prenotazione più piccola può accelerare la maggior parte delle query, risparmiando denaro e risorse. Per ulteriori informazioni sul monitoraggio per BI Engine, consulta Monitoraggio di BI Engine.

I seguenti fattori influiscono sulle dimensioni della prenotazione BI Engine:

  • BI Engine memorizza nella cache solo le colonne e le righe a cui accedi di frequente necessarie per elaborare la query.
  • Quando una prenotazione è completamente utilizzata, BI Engine tenta di scaricare i dati utilizzati meno di recente per liberare capacità per le nuove query.
  • Se più query ad alta intensità di calcolo utilizzano lo stesso set di dati, BI Engine carica copie aggiuntive dei dati per ridistribuire e ottimizzare i tempi di risposta.

Modificare una prenotazione

Per modificare una prenotazione esistente:

Console

Per specificare un insieme di tabelle per l'accelerazione in una prenotazione esistente:

  1. Nella console Google Cloud, vai alla pagina BigQuery.

    Vai a BigQuery

  2. Nel menu di navigazione di BigQuery, fai clic su BI Engine.

    Se il progetto è configurato per le tabelle preferite, nella colonna Tabelle preferite viene visualizzato un insieme di tabelle.

    immagine

  3. Nella riga della prenotazione da modificare, fai clic sull'icona nella colonna Azioni e seleziona Modifica.

  4. Regola il cursore GiB di capacità in base alla quantità di memoria che stai riservando. Fai clic su Avanti.

  5. Tabelle preferite: per specificare un insieme di tabelle per l'accelerazione in una prenotazione esistente, nel campo ID tabella specifica la tabella da accelerare utilizzando il pattern: PROJECT.DATASET.TABLE.

    Sostituisci quanto segue:

    • PROJECT: l'ID del tuo progetto Google Cloud
    • DATASET: il set di dati
    • TABLE: la tabella su cui vuoi accelerare

    L'applicazione delle modifiche può richiedere fino a dieci secondi. Solo le tabelle nell'elenco delle tabelle preferite possono utilizzare l'accelerazione di BI Engine.

    Fai clic su Avanti.

  6. Conferma la prenotazione modificata. Se accetti, fai clic su Aggiorna.

SQL

Puoi utilizzare l'istruzione DDL ALTER BI_CAPACITY SET OPTIONS per creare o modificare una prenotazione BI Engine.

  1. Nella console Google Cloud, vai alla pagina BigQuery.

    Vai a BigQuery

  2. Nell'editor query, inserisci la seguente istruzione:

    ALTER BI_CAPACITY `PROJECT_ID.LOCATION_ID.default`
    SET OPTIONS (
      size_gb = VALUE,
      preferred_tables =
        [`TABLE_PROJECT_ID.DATASET.TABLE1`,
        `TABLE_PROJECT_ID.DATASET.TABLE2`]);
    

    Sostituisci quanto segue:

    • PROJECT_ID: ID facoltativo del progetto che beneficerà dell'accelerazione BI Engine. Se omesso, viene utilizzato il progetto predefinito.
    • LOCATION_ID: la località in cui i dati devono essere memorizzati nella cache, con prefisso region-. Esempi: region-us, region-us-central1.
    • VALUE: la dimensione INT64 della prenotazione per la capacità di BI Engine in gigabyte, da 1 a 250 GB. Puoi richiedere un aumento della capacità massima di prenotazione per i tuoi progetti. Gli aumenti delle prenotazioni sono disponibili nella maggior parte delle regioni e l'elaborazione può richiedere da 3 giorni a una settimana. L'impostazione di VALUE sostituisce il valore esistente, se presente. Se è impostato su NULL, il valore dell'opzione viene cancellato.
    • TABLE_PROJECT_ID.DATASET.TABLE: elenco facoltativo di tabelle preferite a cui deve essere applicata l'accelerazione. Formato: TABLE_PROJECT_ID.DATASET.TABLE or DATASET.TABLE. Se il progetto viene omesso, viene utilizzato il progetto predefinito.

  3. Fai clic su Esegui.

Per ulteriori informazioni su come eseguire le query, vedi Eseguire una query interattiva.

Eliminazione di una prenotazione

Per eliminare una prenotazione di capacità:

Console

  1. Nella pagina BigQuery, in Amministrazione, vai alla pagina BI Engine.

    Vai a BI Engine

  2. Individua la tua prenotazione nella sezione Prenotazioni.

  3. Nella colonna Azioni, fai clic sull'icona a destra della prenotazione e scegli Elimina.

  4. Nella finestra di dialogo Vuoi eliminare la prenotazione?, inserisci Elimina e fai clic su ELIMINA.

SQL

Imposta le opzioni sulla capacità di BI Engine.

  1. Nella console Google Cloud, vai alla pagina BigQuery.

    Vai a BigQuery

  2. Nell'editor query, inserisci la seguente istruzione:

    ALTER BI_CAPACITY `PROJECT_ID.LOCATION_ID.default`
    SET OPTIONS (
      size_gb = 0);
    

    Sostituisci quanto segue:

    • PROJECT_ID: ID facoltativo del progetto che beneficerà dell'accelerazione BI Engine. Se omesso, viene utilizzato il progetto predefinito.
    • LOCATION_ID: la località in cui i dati devono essere memorizzati nella cache, con prefisso region-. Esempi: region-us, region-us-central1.

    Quando elimini tutte le prenotazioni di capacità in un progetto, BI Engine viene disabilitato per il progetto.

  3. Fai clic su Esegui.

Per ulteriori informazioni su come eseguire le query, vedi Eseguire una query interattiva.

bq

Utilizza il comando bq update e fornisci l'istruzione DDL come parametro di query.

bq --project_id="PROJECT_ID" \
update --reservation
    --bi_reservation_size=0 \
    --location=LOCATION

Sostituisci quanto segue:

  • PROJECT_ID: l'ID del progetto
  • LOCATION: posizione del set di dati su cui esegui la query

Verificare le informazioni di BI Engine

Per ottenere informazioni sulla tua capacità di BI Engine, esegui una query sulle tabelle INFORMATION_SCHEMA.

Verifica lo stato della prenotazione

Per verificare lo stato della prenotazione, incluso un insieme di tabelle preferite, visualizza la visualizzazione INFORMATION_SCHEMA.BI_CAPACITIES utilizzando una query SQL. Ad esempio:

SELECT
  *
FROM
  `<PROJECT_ID>.region-<REGION>.INFORMATION_SCHEMA.BI_CAPACITIES`;

Nella console Google Cloud, il risultato di questa query SQL è simile al seguente:

immagine

Visualizza modifiche alla prenotazione

Per visualizzare la cronologia delle modifiche per una determinata prenotazione, utilizza la visualizzazione INFORMATION_SCHEMA.BI_CAPACITY_CHANGES con una query SQL. Ad esempio:

SELECT
  *
FROM
  `<PROJECT_ID>.region-<REGION>.INFORMATION_SCHEMA.BI_CAPACITY_CHANGES`
ORDER BY
  change_timestamp DESC
LIMIT 3;

Nella console Google Cloud, il risultato di questa query SQL è simile al seguente:

righe dei risultati con change_timestamp project_id project_number

Passaggi successivi