Prenota capacità BI Engine

Quando usi BigQuery BI Engine, gli addebiti si basano sulla capacità di BI Engine acquistata per il progetto. Prenotazioni vengono addebitati in GB/ora, con prezzi per regione in base prezzi on demand. Se disponi di un cluster basato sulla capacità impegno, avrai diritto a uno sconto fino al 100% in base all'impegno l'impegno di un'azienda. Per maggiori dettagli, consulta la sezione Prezzi basati sulla capacità.

Puoi acquistare capacità di BigQuery BI Engine creando una prenotazione. La prenotazione è associata a un progetto che identifichi al momento della sua creazione. BI Engine utilizza questa capacità per determinare la quantità di dati che possono essere memorizzati nella cache. Per ulteriori informazioni sulla dimensione massima della prenotazione per BI Engine, consulta Quote e limiti.

Ruoli obbligatori

Per ottenere le autorizzazioni necessarie per creare ed eliminare le prenotazioni, chiedi all'amministratore di concederti il ruolo IAM Amministratore risorse BigQuery (roles/bigquery.resourceAdmin) nel progetto. Per saperne di più sulla concessione dei ruoli, consulta Gestire l'accesso a progetti, cartelle e organizzazioni.

Potresti anche riuscire a ottenere le autorizzazioni richieste tramite i ruoli personalizzati o altri ruoli predefiniti.

Crea una prenotazione

Per prenotare la capacità on demand di BI Engine:

Console

  1. Nella pagina BigQuery, in Amministrazione, vai alla BI Engine.

    Vai a BI Engine

  2. Fai clic su Crea prenotazione.

  3. Nella pagina Crea prenotazione, per il Passaggio 1:

    • Verifica il nome del progetto.
    • Scegli la tua località. La località deve corrispondere posizione dei set di dati su cui esegui le query.
    • Regola il dispositivo di scorrimento in base alla quantità di memoria che stai riservando. Nell'esempio seguente viene impostata la capacità su 2 GB. Il valore massimo corrente è 250 GB. Puoi richiedere un aumenta della capacità massima di prenotazione per i tuoi progetti. Gli aumenti delle prenotazioni sono disponibili nella maggior parte delle regioni e l'elaborazione può richiedere da 3 giorni a una settimana.

      Posizione della capacità di BI Engine

  4. Fai clic su Avanti.

  5. Tabelle preferite (facoltative). Tabelle preferite consente di limitare l'accelerazione di BI Engine a un insieme specificato tabelle. Tutte le altre tabelle utilizzano normali slot BigQuery.

    Nel campo Table Id (ID tabella), specifica la tabella che vuoi accelerare utilizzando il pattern:PROJECT.DATASET.TABLE.

    Sostituisci quanto segue:

    • PROJECT: il tuo ID progetto Google Cloud
    • DATASET: il set di dati
    • TABLE: la tabella su cui vuoi accelerare
  6. Fai clic su Avanti.

  7. Per il Passaggio 3, esamina i dettagli della prenotazione e poi fai clic su Crea.

Dopo aver confermato la prenotazione, i dettagli vengono visualizzati nella pagina Prenotazioni.

SQL

Utilizza l'istruzione DDL ALTER BI_CAPACITY SET OPTIONS per creare o modificare una prenotazione di BI Engine.

  1. Nella console Google Cloud, vai alla pagina BigQuery.

    Vai a BigQuery

  2. Nell'editor query, inserisci la seguente istruzione:

    ALTER BI_CAPACITY `PROJECT_ID.LOCATION_ID.default`
    SET OPTIONS (
      size_gb = VALUE,
      preferred_tables =
        ['TABLE_PROJECT_ID.DATASET.TABLE1',
        'TABLE_PROJECT_ID.DATASET.TABLE2']);

    Sostituisci quanto segue:

    • PROJECT_ID: l'ID facoltativo del progetto che trarranno vantaggio dall'accelerazione di BI Engine. Se omesso, il valore viene utilizzato il progetto predefinito.
    • LOCATION_ID: il località in cui devono essere da memorizzare nella cache, con il prefisso region-. Esempi: region-us, region-us-central1.
    • VALUE: la dimensione INT64 della prenotazione per la capacità di BI Engine in gigabyte, da 1 a 250 GB. Puoi richiedere un aumento della capacità massima di prenotazione per i tuoi progetti. Prenotazione gli aumenti sono disponibili nella maggior parte delle regioni e possono richiedere da 3 giorni a una settimana per l'elaborazione. L'impostazione VALUE sostituisce il valore esistente, se presente. Se è impostato su NULL, il valore dell'opzione viene cancellato.
    • TABLE_PROJECT_ID.DATASET.TABLE: l'elenco facoltativo delle tabelle a cui viene fatto riferimento a cui deve essere applicata l'accelerazione. Formato: TABLE_PROJECT_ID.DATASET.TABLE or DATASET.TABLE. Se il progetto viene omesso, viene usato il progetto predefinito.

  3. Fai clic su Esegui.

Per ulteriori informazioni su come eseguire le query, consulta Eseguire una query interattiva.

bq

Utilizza la bq update e fornisci il comando l'istruzione DDL (Data Definition Language) come parametro di query:

bq --project_id=PROJECT_ID update \
    --bi_reservation_size=SIZE \
    --location=LOCATION \
    --reservation

Sostituisci quanto segue:

  • PROJECT_ID: l'ID del progetto
  • SIZE: la capacità di memoria di prenotazione in gigabyte, da 1 a 250 GB. Puoi richiedere un aumento della capacità di prenotazione massima per i tuoi progetti. Gli aumenti delle prenotazioni sono disponibili nella maggior parte delle regioni e l'elaborazione può richiedere da 3 giorni a una settimana.
  • LOCATION: posizione del set di dati su cui esegui la query

Stimare e misurare la capacità

Per stimare i requisiti di capacità per una prenotazione di BI Engine:

  1. Vedi la vista TOTAL_LOGICAL_BYTES per determinare le dimensioni logiche della tabella e utilizzarle per la prenotazione iniziale di BI Engine. Ad esempio:

    SELECT
      SUM(TOTAL_LOGICAL_BYTES) / 1024.0 / 1024.0 / 1024.0 AS logical_size_gb
    FROM
      `region-us.INFORMATION_SCHEMA.TABLE_STORAGE`
    WHERE
      TABLE_NAME IN UNNEST(["Table1", "Table2"]);

    Ad esempio, per le query su un insieme di tabelle contenenti un totale di 200 GB di dati, come best practice puoi iniziare con una prenotazione di BI Engine di 200 GB. Le query più selettive che utilizzano solo un sottoinsieme di campi o partizioni disponibili potrebbero iniziare con dimensioni di prenotazione più piccole.

  2. Eseguire tutte le query che necessitano di ottimizzazione e che sono state create nell' lo stesso progetto e la stessa regione della prenotazione BI Engine. L'obiettivo è approssimare il carico di lavoro da ottimizzare. Il caricamento più elevato richiede più memoria per gestire le query. I dati vengono caricati in BI Engine dopo la ricezione della query.

  3. Confronta la prenotazione RAM di BI Engine con il numero di byte utilizzati, reservation/used_bytes nelle metriche bigquerybiengine di Cloud Monitoring.

  4. Regola la capacità di prenotazione in base ai risultati. In molti casi d'uso, con una prenotazione più piccola puoi accelerare la maggior parte delle query e risparmiare denaro e risorse. Per ulteriori informazioni sul monitoraggio di BI Engine, consulta Monitoraggio di BI Engine.

I seguenti fattori influiscono sulle dimensioni della prenotazione BI Engine:

  • BI Engine memorizza nella cache solo le righe e le colonne a cui viene eseguito spesso l'accesso e che sono necessarie per elaborare la query.
  • Quando una prenotazione è completamente utilizzata, BI Engine tenta di ridurre il carico dei dati utilizzati meno di recente per liberare capacità per le nuove query.
  • Se più query con un'elaborazione intensiva utilizzano lo stesso set di dati, BI Engine carica copie aggiuntive dei dati per ridistribuirli e ottimizzare i tempi di risposta.

Modifica una prenotazione

Per modificare una prenotazione esistente:

Console

Per specificare un insieme di tabelle per l'accelerazione in una prenotazione esistente, segui questi passaggi:

  1. Nella console Google Cloud, vai alla pagina BigQuery.

    Vai a BigQuery

  2. Nel menu di navigazione di BigQuery, fai clic su BI Engine.

    Se il progetto è configurato per le tabelle preferite, nella colonna Tabelle preferite viene visualizzato un insieme di tabelle.

    immagine

  3. Nella riga della prenotazione da modificare, fai clic sull'icona nella Azioni e seleziona Modifica.

  4. Regola il cursore GiB della capacità sul valore della capacità di memoria. che stai prenotando. Fai clic su Avanti.

  5. Tabelle preferite: per specificare un insieme di tabelle per l'accelerazione in un una prenotazione esistente, nel campo ID tabella, specifica la tabella vuoi accelerare utilizzando lo schema: PROJECT.DATASET.TABLE.

    Sostituisci quanto segue:

    • PROJECT: il tuo ID progetto Google Cloud
    • DATASET: il set di dati
    • TABLE: la tabella che vuoi accelerare

    L'applicazione delle modifiche può richiedere fino a dieci secondi. Solo le tabelle nel dell'elenco delle tabelle preferite può utilizzare l'accelerazione di BI Engine.

    Fai clic su Avanti.

  6. Conferma la prenotazione modificata. Se accetti, fai clic su Aggiorna.

SQL

Puoi utilizzare l'istruzione DDL ALTER BI_CAPACITY SET OPTIONS per creare o modificare una prenotazione BI Engine.

  1. Nella console Google Cloud, vai alla pagina BigQuery.

    Vai a BigQuery

  2. Nell'editor di query, inserisci la seguente istruzione:

    ALTER BI_CAPACITY `PROJECT_ID.LOCATION_ID.default`
    SET OPTIONS (
      size_gb = VALUE,
      preferred_tables =
        [`TABLE_PROJECT_ID.DATASET.TABLE1`,
        `TABLE_PROJECT_ID.DATASET.TABLE2`]);

    Sostituisci quanto segue:

    • PROJECT_ID: ID facoltativo del progetto che beneficia dell'accelerazione di BI Engine. Se omesso, il valore viene utilizzato il progetto predefinito.
    • LOCATION_ID: la posizione in cui devono essere memorizzati nella cache i dati, con prefisso region-. Esempi: region-us, region-us-central1.
    • VALUE: la dimensione INT64 della prenotazione per la capacità di BI Engine in gigabyte, da 1 a 250 GB. Puoi richiedi un aumento della capacità massima di prenotazione per i tuoi progetti. Prenotazione gli aumenti sono disponibili nella maggior parte delle regioni e possono richiedere da 3 giorni a una settimana per l'elaborazione. L'impostazione VALUE sostituisce il valore esistente, se presente. Se imposti il valore NULL, il valore dell'opzione viene cancellato.
    • TABLE_PROJECT_ID.DATASET.TABLE: elenco facoltativo di tabelle preferite a cui deve essere applicata l'accelerazione. Formato: TABLE_PROJECT_ID.DATASET.TABLE or DATASET.TABLE. Se il progetto viene omesso, viene utilizzato il progetto predefinito.

  3. Fai clic su Esegui.

Per ulteriori informazioni su come eseguire le query, consulta Eseguire una query interattiva.

Eliminazione di una prenotazione

Per eliminare una prenotazione di capacità:

Console

  1. Nella pagina BigQuery, vai a Amministrazione e poi alla pagina BI Engine.

    Vai a BI Engine

  2. Nella sezione Prenotazioni, individua la tua prenotazione.

  3. Nella colonna Azioni, fai clic sull'icona a destra della prenotazione e scegli Elimina.

  4. Nella finestra di dialogo Vuoi eliminare la prenotazione?, inserisci Elimina e poi fai clic su ELIMINA.

SQL

Imposta le opzioni sulla capacità di BI Engine.

  1. Nella console Google Cloud, vai alla pagina BigQuery.

    Vai a BigQuery

  2. Nell'editor di query, inserisci la seguente istruzione:

    ALTER BI_CAPACITY `PROJECT_ID.LOCATION_ID.default`
    SET OPTIONS (
      size_gb = 0);

    Sostituisci quanto segue:

    • PROJECT_ID: ID facoltativo del progetto che trarranno vantaggio dall'accelerazione di BI Engine. Se omesso, viene utilizzato il progetto predefinito.
    • LOCATION_ID: la località in cui deve essere memorizzato nella cache, preceduto dal prefisso region-. Esempi: region-us, region-us-central1.

    Quando elimini tutte le prenotazioni di capacità in un progetto, BI Engine è disabilitato per quel progetto.

  3. Fai clic su Esegui.

Per ulteriori informazioni su come eseguire query, consulta Eseguire una query interattiva.

bq

Usa il comando bq update e fornisci l'istruzione DDL come parametro di query.

bq --project_id="PROJECT_ID" \
update --reservation
    --bi_reservation_size=0 \
    --location=LOCATION

Sostituisci quanto segue:

  • PROJECT_ID: l'ID del progetto
  • LOCATION: posizione del set di dati su cui esegui la query

Verificare le informazioni di BI Engine

Puoi ottenere informazioni sulla tua capacità BI Engine eseguendo query le tabelle INFORMATION_SCHEMA.

Verifica lo stato della prenotazione

Per verificare lo stato della prenotazione, incluso un insieme di tavoli preferiti, visualizza la vista INFORMATION_SCHEMA.BI_CAPACITIES utilizzando una query SQL. Ad esempio:

SELECT
  *
FROM
  `<PROJECT_ID>.region-<REGION>.INFORMATION_SCHEMA.BI_CAPACITIES`;

Nella console Google Cloud, il risultato di questa query SQL è simile al seguente:

immagine

Visualizzare le modifiche alla prenotazione

Per visualizzare la cronologia delle modifiche di una prenotazione specifica, utilizza la visualizzazione INFORMATION_SCHEMA.BI_CAPACITY_CHANGES con una query SQL. Ad esempio:

SELECT
  *
FROM
  `<PROJECT_ID>.region-<REGION>.INFORMATION_SCHEMA.BI_CAPACITY_CHANGES`
ORDER BY
  change_timestamp DESC
LIMIT 3;

Nella console Google Cloud, il risultato di questa query SQL è simile al seguente:

righe dei risultati con change_timestamp project_id project_number

Passaggi successivi