Esporta i suggerimenti in BigQuery

Panoramica

Con l'esportazione BigQuery, puoi visualizzare snapshot giornalieri dei suggerimenti per la tua organizzazione. Per farlo, usa BigQuery Data Transfer Service. Consulta questo documento per vedere quali motore per suggerimenti sono attualmente inclusi in BigQuery Export.

Prima di iniziare

Completa i seguenti passaggi prima di creare un trasferimento di dati per i suggerimenti:

  • Concedi all'autorizzazione BigQuery Data Transfer Service di gestire il tuo trasferimento di dati. Se utilizzi la UI web di BigQuery per creare il trasferimento, devi consentire i popup da console.cloud.google.com sul browser per poter visualizzare le autorizzazioni. Per ulteriori dettagli, consulta Attivazione di BigQuery Data Transfer Service.
  • Crea un set di dati BigQuery per archiviare i dati.
    • Il trasferimento di dati utilizza la stessa regione in cui viene creato il set di dati. La località è immutabile una volta creati il set di dati e il trasferimento.
    • Il set di dati conterrà insight e suggerimenti da tutte le regioni del mondo. Di conseguenza, questa operazione aggrega tutti questi dati in una regione globale durante il processo. Fai riferimento all'assistenza clienti Google Cloud in caso di problemi relativi alla residenza dei dati.
    • Se la posizione del set di dati è stata lanciata di recente, potrebbe verificarsi un ritardo nella disponibilità iniziale dei dati dell'esportazione.

Prezzi

L'esportazione dei suggerimenti in BigQuery è disponibile per tutti i clienti del motore per suggerimenti in base al livello di prezzo del motore per suggerimenti.

Autorizzazioni obbligatorie

Durante la configurazione del trasferimento di dati, sono necessarie le seguenti autorizzazioni a livello di progetto in cui crei un trasferimento di dati:

  • bigquery.transfers.update - Ti consente di creare il trasferimento
  • bigquery.datasets.update - Ti consente di aggiornare le azioni sul set di dati di destinazione
  • resourcemanager.projects.update - Consente di selezionare un progetto in cui archiviare i dati dell'esportazione
  • pubsub.topics.list: consente di selezionare un argomento Pub/Sub per ricevere notifiche sulla tua esportazione

La seguente autorizzazione è obbligatoria a livello di organizzazione. Questa organizzazione corrisponde a quella per cui viene configurata l'esportazione.

  • recommender.resources.export: consente di esportare i suggerimenti in BigQuery

Per esportare i prezzi negoziati per i suggerimenti per il risparmio sui costi, sono necessarie le seguenti autorizzazioni:

  • billing.resourceCosts.get at project level: consente di esportare i prezzi negoziati per i suggerimenti a livello di progetto
  • billing.accounts.getSpendingInformation at billing account level - Consente di esportare i prezzi negoziati per i suggerimenti a livello di account di fatturazione

Senza queste autorizzazioni, i suggerimenti di risparmio sui costi verranno esportati con prezzi standard anziché con prezzi negoziati.

Concedi le autorizzazioni

Devi concedere i seguenti ruoli al progetto in cui crei il trasferimento di dati:

    Per consentirti di creare un'azione di trasferimento e aggiornamento sul set di dati di destinazione, devi concedere il seguente ruolo:

  • Ruolo Amministratore BigQuery - roles/bigquery.admin
  • Esistono più ruoli che contengono le autorizzazioni per selezionare un progetto al fine di archiviare i dati di esportazione e per selezionare un argomento Pub/Sub per ricevere notifiche. Per rendere disponibili entrambe le autorizzazioni, puoi concedere il ruolo seguente:

  • Ruolo di Proprietario progetto - roles/owner
  • Esistono più ruoli che contengono l'autorizzazione billing.resourceCosts.get per esportare i prezzi negoziati per i suggerimenti a livello di progetto per risparmiare sui costi: puoi concederne uno qualsiasi:

  • Ruolo Proprietario progetto - roles/owner
  • Ruolo Visualizzatore progetto - roles/viewer
  • Ruolo Editor di progetto - roles/editor
  • Esistono più ruoli che contengono l'autorizzazione billing.accounts.getSpendingInformation per esportare i prezzi negoziati per i suggerimenti a livello di account di fatturazione per risparmiare sui costi: puoi concederne uno qualsiasi:

  • Ruolo Amministratore account di fatturazione - roles/billing.admin
  • Ruolo Gestore costi account di fatturazione - roles/billing.costsManager
  • Ruolo Visualizzatore account di fatturazione - roles/billing.viewer

Devi concedere il seguente ruolo a livello di organizzazione:

  • Ruolo Esportatore suggerimenti (roles/recommender.exporter) nella console Google Cloud.

Puoi anche creare ruoli personalizzati contenenti le autorizzazioni richieste.

Crea un trasferimento di dati per i suggerimenti

  1. Accedi alla console Google Cloud.

    Accedi alla console Google Cloud

  2. Nella schermata Home, fai clic sulla scheda Consigli.

  3. Fai clic su Esporta per visualizzare il modulo di BigQuery Export.

  4. Seleziona un progetto di destinazione in cui archiviare i dati dei suggerimenti e fai clic su Avanti.

  5. Fai clic su Abilita API per abilitare le API BigQuery per l'esportazione. Il completamento dell'operazione può richiedere diversi secondi. Al termine, fai clic su Continua.

  6. Nel modulo Configura trasferimento, fornisci i seguenti dettagli:

    • Nella sezione Nome configurazione di trasferimento, in Nome visualizzato, inserisci un nome per il trasferimento. Il nome del trasferimento può essere qualsiasi valore che consenta di identificare facilmente il trasferimento qualora fosse necessario modificarlo in un secondo momento.

    • Nella sezione Opzioni di pianificazione, per Pianificazione, lascia il valore predefinito (Inizia ora) o fai clic su Inizia a un orario prestabilito.

      • Per Si ripete, scegli un'opzione per la frequenza di esecuzione del trasferimento.

        • Ogni giorno (impostazione predefinita)
        • Ogni settimana
        • Ogni mese
        • Valore personalizzato
        • On demand
      • In Data di inizio e ora di esecuzione, inserisci la data e l'ora di inizio del trasferimento. Se scegli Inizia ora, questa opzione è disattivata.

    • Nella sezione Impostazioni destinazione, per Set di dati di destinazione, scegli l'ID del set di dati che hai creato per archiviare i dati.

    • Nella sezione Dettagli origine dati:

      • Il valore predefinito di organization_id è l'organizzazione per cui stai visualizzando attualmente i suggerimenti. Se vuoi esportare i suggerimenti in un'altra organizzazione, puoi modificare questa impostazione nella parte superiore della console nel visualizzatore dell'organizzazione.

    • (Facoltativo) Nella sezione Opzioni di notifica:

      • Fai clic sul pulsante di attivazione/disattivazione per abilitare le notifiche via email. Quando abiliti questa opzione, l'amministratore dei trasferimenti riceve una notifica via email quando un trasferimento non va a buon fine.
      • In Seleziona un argomento Pub/Sub, scegli il nome dell'argomento o fai clic su Crea un argomento. Questa opzione consente di configurare le notifiche di Pub/Sub per il trasferimento.

  7. Fai clic su Crea per creare il trasferimento.

  8. Fai clic su Consenti nel popup per il consenso.

  9. Una volta creato il trasferimento, tornerai all'hub dei suggerimenti. Puoi fare clic sul link per accedere ai dettagli della configurazione del trasferimento. In alternativa, puoi accedere ai trasferimenti procedendo nel seguente modo:

    • Vai alla pagina BigQuery nella console Google Cloud.

      Vai alla pagina di BigQuery

    • Fai clic su Trasferimenti di dati. Puoi visualizzare tutti i trasferimenti di dati disponibili.

Visualizzare la cronologia delle esecuzioni per un trasferimento

Per visualizzare la cronologia delle esecuzioni per un trasferimento:

  1. Vai alla pagina BigQuery nella console Google Cloud.

    Vai alla pagina di BigQuery

  2. Fai clic su Trasferimenti di dati. Puoi visualizzare tutti i trasferimenti di dati disponibili.

  3. Fai clic sul trasferimento appropriato nell'elenco.

  4. Nell'elenco dei trasferimenti di esecuzioni visualizzato nella scheda CRONOLOGIA ESECUZIONI, seleziona il trasferimento di cui vuoi visualizzare i dettagli.

  5. Viene visualizzato il riquadro Dettagli esecuzione per il singolo trasferimento dell'esecuzione selezionato. Alcuni dei possibili dettagli di esecuzione visualizzati sono:

    • Trasferimento differito a causa di dati di origine non disponibili.
    • Job che indica il numero di righe esportate in una tabella
    • Autorizzazioni mancanti per un'origine dati che devi concedere e pianificare in seguito un backfill.

Quando vengono esportati i dati?

Quando crei un trasferimento di dati, la prima esportazione viene eseguita entro due giorni. Dopo la prima esportazione, i job di esportazione vengono eseguiti alla cadenza richiesta al momento della configurazione. Si applicano le seguenti condizioni:

  • Il job di esportazione per un giorno specifico (D) esporta i dati di fine giorno (D) nel set di dati BigQuery, che di solito termina entro la fine del giorno successivo (D+1). Il job di esportazione viene eseguito nel fuso orario PST e potrebbe presentare un ritardo aggiuntivo in altri fusi orari.

  • Il job di esportazione giornaliero non viene eseguito finché non sono disponibili tutti i dati per l'esportazione. Ciò può comportare variazioni, e talvolta ritardi, nel giorno e nell'ora in cui il set di dati viene aggiornato. Di conseguenza, è meglio utilizzare l'ultimo snapshot dei dati disponibile, anziché avere una dipendenza rigida e sensibile a tabelle con data specifiche.

Messaggi di stato comuni relativi a un'esportazione

Scopri i messaggi di stato più comuni che puoi visualizzare per l'esportazione dei suggerimenti in BigQuery.

L'utente non dispone dell'autorizzazione necessaria

Il seguente messaggio viene visualizzato quando l'utente non dispone dell'autorizzazione richiesta recommender.resources.export. Verrà visualizzato il seguente messaggio:

User does not have required permission "recommender.resources.export". Please, obtain the required permissions for the datasource and try again by triggering a backfill for this date

Per risolvere il problema, concedi il ruolo IAM roles/recommender.exporter a user/service account configurando l'esportazione a livello di organizzazione per l'organizzazione per la quale è stata configurata l'esportazione. Può essere fornito tramite i comandi gcloud seguenti:

  • Nel caso dell'utente:

    gcloud organizations add-iam-policy-binding *<organization_id>* --member='user:*<user_name>*' --role='roles/recommender.exporter'
    
  • Nel caso di un account di servizio:

    gcloud organizations add-iam-policy-binding *<organization_id>* --member='serviceAccount:*<service_acct_name>*' --role='roles/recommender.exporter'
    

Trasferimento differito perché i dati di origine non sono disponibili

Quando il trasferimento viene ripianificato, viene visualizzato il seguente messaggio perché i dati di origine non sono ancora disponibili. Non si tratta di un errore. Significa che le pipeline di esportazione non sono state ancora completate per quel giorno. Il trasferimento verrà eseguito nuovamente al nuovo orario pianificato e avrà esito positivo una volta completate le pipeline di esportazione. Verrà visualizzato il seguente messaggio:

Transfer deferred due to source data not being available

Dati di origine non trovati

Il seguente messaggio viene visualizzato quando le pipeline F1toPlacer sono state completate, ma non sono stati trovati consigli o insight per l'organizzazione per cui è stata configurata l'esportazione. Verrà visualizzato il seguente messaggio:

Source data not found for 'recommendations_export$<date>'insights_export$<date>

Questo messaggio appare per i seguenti motivi:

  • L'utente ha configurato l'esportazione meno di due giorni fa. La guida per i clienti informa i clienti che c'è un giorno di ritardo prima che la loro esportazione sia disponibile.
  • Non sono disponibili consigli o approfondimenti per la sua organizzazione per il giorno specifico. Potrebbe trattarsi del caso effettivo oppure le pipeline potrebbero essere state eseguite prima che tutti i suggerimenti o gli insight fossero disponibili per il giorno.

Visualizza le tabelle per un trasferimento

Quando esporti i suggerimenti in BigQuery, il set di dati contiene due tabelle partitioned per data:

  • recommendations_export
  • insight_export

Per maggiori dettagli su tabelle e schema, consulta gli articoli Creare e utilizzare le tabelle e Specificare uno schema.

Per visualizzare le tabelle per un trasferimento di dati:

  1. Vai alla pagina BigQuery nella console Google Cloud. Vai alla pagina di BigQuery

  2. Fai clic su Trasferimenti di dati. Puoi visualizzare tutti i trasferimenti di dati disponibili.

  3. Fai clic sul trasferimento appropriato nell'elenco.

  4. Fai clic sulla scheda CONFIGURAZIONE e quindi sul set di dati.

  5. Nel riquadro Spazio di esplorazione, espandi il progetto e seleziona un set di dati. La descrizione e i dettagli vengono visualizzati nel riquadro dei dettagli. Le tabelle di un set di dati sono elencate con il nome del set di dati nel riquadro Explorer.

Pianifica un backfill

I suggerimenti per una data nel passato (ovvero una data successiva alla data in cui l'organizzazione è stata attivata per l'esportazione) possono essere esportati pianificando un backfill. Per pianificare un backfill:

  1. Vai alla pagina BigQuery nella console Google Cloud.

    Vai alla pagina di BigQuery

  2. Fai clic su Trasferimenti di dati.

  3. Nella pagina Trasferimenti, fai clic su un trasferimento appropriato nell'elenco.

    1. Fai clic su Pianifica backfill.

    2. Nella finestra di dialogo Pianifica backfill, scegli la Data di inizio e la Data di fine.

Per ulteriori informazioni sull'uso dei trasferimenti, vedi Operazioni con i trasferimenti.

Esporta schema

Tabella di esportazione dei suggerimenti:

schema:
   fields:
     - name: cloud_entity_type
       type: STRING
       description: |
         Represents what cloud entity type the recommendation was generated for - eg: project number, billing account
     - name: cloud_entity_id
       type: STRING
       description: |
         Value of the project number or billing account id
     - name: name
       type: STRING
       description: |
         Name of recommendation. A project recommendation is represented as
         projects/[PROJECT_NUMBER]/locations/[LOCATION]/recommenders/[RECOMMENDER_ID]/recommendations/[RECOMMENDATION_ID]
     - name: location
       type: STRING
       description: |
         Location for which this recommendation is generated
     - name: recommender
       type: STRING
       description: |
         Recommender ID of the recommender that has produced this recommendation
     - name: recommender_subtype
       type: STRING
       description: |
           Contains an identifier for a subtype of recommendations produced for the
           same recommender. Subtype is a function of content and impact, meaning a
           new subtype will be added when either content or primary impact category
           changes.
           Examples:
           For recommender = "google.iam.policy.Recommender",
           recommender_subtype can be one of "REMOVE_ROLE"/"REPLACE_ROLE"
     - name: target_resources
       type: STRING
       mode: REPEATED
       description: |
         Contains the fully qualified resource names for resources changed by the
         operations in this recommendation. This field is always populated. ex:
         [//cloudresourcemanager.googleapis.com/projects/foo].
     - name: description
       type: STRING
       description: |
         Required. Free-form human readable summary in English.
         The maximum length is 500 characters.
     - name: last_refresh_time
       type: TIMESTAMP
       description: |
         Output only. Last time this recommendation was refreshed by the system that created it in the first place.
     - name: primary_impact
       type: RECORD
       description: |
         Required. The primary impact that this recommendation can have while trying to optimize
         for one category.
       schema:
         fields:
         - name: category
           type: STRING
           description: |
             Category that is being targeted.
             Values can be the following:
               CATEGORY_UNSPECIFIED:
                 Default unspecified category. Do not use directly.
               COST:
                 Indicates a potential increase or decrease in cost.
               SECURITY:
                 Indicates a potential increase or decrease in security.
               PERFORMANCE:
                 Indicates a potential increase or decrease in performance.
               RELIABILITY:
                 Indicates a potential increase or decrease in reliability.
         - name: cost_projection
           type: RECORD
           description: Optional. Use with CategoryType.COST
           schema:
             fields:
             - name: cost
               type: RECORD
               description: |
                 An approximate projection on amount saved or amount incurred.
                 Negative cost units indicate cost savings and positive cost units indicate
                 increase. See google.type.Money documentation for positive/negative units.
               schema:
                 fields:
                 - name: currency_code
                   type: STRING
                   description: The 3-letter currency code defined in ISO 4217.
                 - name: units
                   type: INTEGER
                   description: |
                     The whole units of the amount. For example if `currencyCode` is `"USD"`,
                     then 1 unit is one US dollar.
                 - name: nanos
                   type: INTEGER
                   description: |
                     Number of nano (10^-9) units of the amount.
                     The value must be between -999,999,999 and +999,999,999 inclusive.
                     If `units` is positive, `nanos` must be positive or zero.
                     If `units` is zero, `nanos` can be positive, zero, or negative.
                     If `units` is negative, `nanos` must be negative or zero.
                     For example $-1.75 is represented as `units`=-1 and `nanos`=-750,000,000.
             - name: cost_in_local_currency
               type: RECORD
               description: |
                 An approximate projection on amount saved or amount incurred in the local currency.
                 Negative cost units indicate cost savings and positive cost units indicate
                 increase. See google.type.Money documentation for positive/negative units.
               schema:
                 fields:
                 - name: currency_code
                   type: STRING
                   description: The 3-letter currency code defined in ISO 4217.
                 - name: units
                   type: INTEGER
                   description: |
                     The whole units of the amount. For example if `currencyCode` is `"USD"`,
                     then 1 unit is one US dollar.
                 - name: nanos
                   type: INTEGER
                   description: |
                     Number of nano (10^-9) units of the amount.
                     The value must be between -999,999,999 and +999,999,999 inclusive.
                     If `units` is positive, `nanos` must be positive or zero.
                     If `units` is zero, `nanos` can be positive, zero, or negative.
                     If `units` is negative, `nanos` must be negative or zero.
                     For example $-1.75 is represented as `units`=-1 and `nanos`=-750,000,000.
             - name: duration
               type: RECORD
               description: Duration for which this cost applies.
               schema:
                 fields:
                 - name: seconds
                   type: INTEGER
                   description: |
                     Signed seconds of the span of time. Must be from -315,576,000,000
                     to +315,576,000,000 inclusive. Note: these bounds are computed from:
                     60 sec/min * 60 min/hr * 24 hr/day * 365.25 days/year * 10000 years
                 - name: nanos
                   type: INTEGER
                   description: |
                     Signed fractions of a second at nanosecond resolution of the span
                     of time. Durations less than one second are represented with a 0
                     `seconds` field and a positive or negative `nanos` field. For durations
                     of one second or more, a non-zero value for the `nanos` field must be
                     of the same sign as the `seconds` field. Must be from -999,999,999
                     to +999,999,999 inclusive.
             - name: pricing_type_name
               type: STRING
               description: |
                     A pricing type can either be based on the price listed on GCP (LIST) or a custom
                     price based on past usage (CUSTOM).
         - name: reliability_projection
           type: RECORD
           description: Optional. Use with CategoryType.RELIABILITY
           schema:
             fields:
             - name: risk_types
               type: STRING
               mode: REPEATED
               description: |
                 The risk associated with the reliability issue.
                   RISK_TYPE_UNSPECIFIED:
                     Default unspecified risk. Do not use directly.
                   SERVICE_DISRUPTION:
                     Potential service downtime.
                   DATA_LOSS:
                     Potential data loss.
                   ACCESS_DENY:
                     Potential access denial. The service is still up but some or all clients
                     can not access it.
             - name: details_json
               type: STRING
               description: |
                 Additional reliability impact details that is provided by the recommender in JSON
                 format.
     - name: state
       type: STRING
       description: |
             Output only. The state of the recommendation:
               STATE_UNSPECIFIED:
                 Default state. Do not use directly.
               ACTIVE:
                 Recommendation is active and can be applied. Recommendations content can
                 be updated by Google.
                 ACTIVE recommendations can be marked as CLAIMED, SUCCEEDED, or FAILED.
               CLAIMED:
                 Recommendation is in claimed state. Recommendations content is
                 immutable and cannot be updated by Google.
                 CLAIMED recommendations can be marked as CLAIMED, SUCCEEDED, or FAILED.
               SUCCEEDED:
                 Recommendation is in succeeded state. Recommendations content is
                 immutable and cannot be updated by Google.
                 SUCCEEDED recommendations can be marked as SUCCEEDED, or FAILED.
               FAILED:
                 Recommendation is in failed state. Recommendations content is immutable
                 and cannot be updated by Google.
                 FAILED recommendations can be marked as SUCCEEDED, or FAILED.
               DISMISSED:
                 Recommendation is in dismissed state.
                 DISMISSED recommendations can be marked as ACTIVE.
     - name: ancestors
       type: RECORD
       description: |
         Ancestry for the recommendation entity
       schema:
         fields:
         - name: organization_id
           type: STRING
           description: |
             Organization to which the recommendation project
         - name: folder_ids
           type: STRING
           mode: REPEATED
           description: |
             Up to 5 levels of parent folders for the recommendation project
     - name: associated_insights
       type: STRING
       mode: REPEATED
       description: |
         Insights associated with this recommendation. A project insight is represented as
         projects/[PROJECT_NUMBER]/locations/[LOCATION]/insightTypes/[INSIGHT_TYPE_ID]/insights/[insight_id]
     - name: recommendation_details
       type: STRING
       description: |
         Additional details about the recommendation in JSON format
     - name: priority
       type: STRING
       description: |
         Priority of the recommendation:
           PRIORITY_UNSPECIFIED:
             Default unspecified priority. Do not use directly.
           P4:
             Lowest priority.
           P3:
             Second lowest priority.
           P2:
             Second highest priority.
           P1:
             Highest priority.

Tabella di esportazione degli insight:

schema:
  - fields:
      - name: cloud_entity_type
        type: STRING
        description: |
          Represents what cloud entity type the recommendation was generated for - eg: project number, billing account
      - name: cloud_entity_id
        type: STRING
        description: |
          Value of the project number or billing account id
      - name: name
        type: STRING
        description: |
          Name of recommendation. A project recommendation is represented as
          projects/[PROJECT_NUMBER]/locations/[LOCATION]/recommenders/[RECOMMENDER_ID]/recommendations/[RECOMMENDATION_ID]
      - name: location
        type: STRING
        description: |
          Location for which this recommendation is generated
      - name: insight_type
        type: STRING
        description: |
          Recommender ID of the recommender that has produced this recommendation
      - name: insight_subtype
        type: STRING
        description: |
            Contains an identifier for a subtype of recommendations produced for the
            same recommender. Subtype is a function of content and impact, meaning a
            new subtype will be added when either content or primary impact category
            changes.
            Examples:
            For recommender = "google.iam.policy.Recommender",
            recommender_subtype can be one of "REMOVE_ROLE"/"REPLACE_ROLE"
      - name: target_resources
        type: STRING
        mode: REPEATED
        description: |
          Contains the fully qualified resource names for resources changed by the
          operations in this recommendation. This field is always populated. ex:
          [//cloudresourcemanager.googleapis.com/projects/foo].
      - name: description
        type: STRING
        description: |
          Required. Free-form human readable summary in English.
          The maximum length is 500 characters.
      - name: last_refresh_time
        type: TIMESTAMP
        description: |
          Output only. Last time this recommendation was refreshed by the system that created it in the first place.
      - name: category
        type: STRING
        description: |
          Category being targeted by the insight. Can be one of:
          Unspecified category.
          CATEGORY_UNSPECIFIED = Unspecified category.
          COST = The insight is related to cost.
          SECURITY = The insight is related to security.
          PERFORMANCE = The insight is related to performance.
          MANAGEABILITY = The insight is related to manageability.
          RELIABILITY = The insight is related to reliability.;
      - name: state
        type: STRING
        description: |
              Output only. The state of the recommendation:
                STATE_UNSPECIFIED:
                  Default state. Do not use directly.
                ACTIVE:
                  Recommendation is active and can be applied. Recommendations content can
                  be updated by Google.
                  ACTIVE recommendations can be marked as CLAIMED, SUCCEEDED, or FAILED.
                CLAIMED:
                  Recommendation is in claimed state. Recommendations content is
                  immutable and cannot be updated by Google.
                  CLAIMED recommendations can be marked as CLAIMED, SUCCEEDED, or FAILED.
                SUCCEEDED:
                  Recommendation is in succeeded state. Recommendations content is
                  immutable and cannot be updated by Google.
                  SUCCEEDED recommendations can be marked as SUCCEEDED, or FAILED.
                FAILED:
                  Recommendation is in failed state. Recommendations content is immutable
                  and cannot be updated by Google.
                  FAILED recommendations can be marked as SUCCEEDED, or FAILED.
                DISMISSED:
                  Recommendation is in dismissed state.
                  DISMISSED recommendations can be marked as ACTIVE.
      - name: ancestors
        type: RECORD
        description: |
          Ancestry for the recommendation entity
        schema:
          fields:
          - name: organization_id
            type: STRING
            description: |
              Organization to which the recommendation project
          - name: folder_ids
            type: STRING
            mode: REPEATED
            description: |
              Up to 5 levels of parent folders for the recommendation project
      - name: associated_recommendations
        type: STRING
        mode: REPEATED
        description: |
          Insights associated with this recommendation. A project insight is represented as
          projects/[PROJECT_NUMBER]/locations/[LOCATION]/insightTypes/[INSIGHT_TYPE_ID]/insights/[insight_id]
      - name: insight_details
        type: STRING
        description: |
          Additional details about the insight in JSON format
          schema:
            fields:
            - name: content
              type: STRING
              description: |
                A struct of custom fields to explain the insight.
                Example: "grantedPermissionsCount": "1000"
            - name: observation_period
              type: TIMESTAMP
              description: |
                Observation period that led to the insight. The source data used to
                generate the insight ends at last_refresh_time and begins at
                (last_refresh_time - observation_period).
          - name: state_metadata
            type: STRING
            description: |
              A map of metadata for the state, provided by user or automations systems.
      - name: severity
        type: STRING
        description: |
          Severity of the insight:
            SEVERITY_UNSPECIFIED:
              Default unspecified severity. Do not use directly.
            LOW:
              Lowest severity.
            MEDIUM:
              Second lowest severity.
            HIGH:
              Second highest severity.
            CRITICAL:
              Highest severity.

Esempi di query

Puoi utilizzare le seguenti query di esempio per analizzare i dati esportati.

Visualizzare i risparmi sui costi per i suggerimenti in cui la durata del suggerimento viene visualizzata in giorni

SELECT name, recommender, target_resources,
  case primary_impact.cost_projection.cost.units is null
       when true then round(primary_impact.cost_projection.cost.nanos * power(10,-9),2)
       else
       round( primary_impact.cost_projection.cost.units +
       (primary_impact.cost_projection.cost.nanos * power(10,-9)), 2)
   end
   as dollar_amt,
   primary_impact.cost_projection.duration.seconds/(60*60*24) as duration_in_days
FROM `<project>.<dataset>.recommendations_export`
WHERE DATE(_PARTITIONTIME) = "<date>"
and primary_impact.category = "COST"

Visualizzazione dell'elenco dei ruoli IAM inutilizzati

SELECT *
FROM `<project>.<dataset>.recommendations_export`
WHERE DATE(_PARTITIONTIME) = "<date>"
and recommender = "google.iam.policy.Recommender"
and recommender_subtype = "REMOVE_ROLE"

Visualizzazione di un elenco di ruoli concessi che devono essere sostituiti da ruoli più piccoli

SELECT *
FROM `<project>.<dataset>.recommendations_export`
WHERE DATE(_PARTITIONTIME) = "<date>"
and recommender = "google.iam.policy.Recommender"
and recommender_subtype = "REPLACE_ROLE"

Visualizzare gli approfondimenti per un consiglio

SELECT recommendations.name as recommendation_name,
insights.name as insight_name,
recommendations.cloud_entity_id,
recommendations.cloud_entity_type,
recommendations.recommender,
recommendations.recommender_subtype,
recommendations.description,
recommendations.target_resources,
recommendations.recommendation_details,
recommendations.state,
recommendations.last_refresh_time as recommendation_last_refresh_time,
insights.insight_type,
insights.insight_subtype,
insights.category,
insights.description,
insights.insight_details,
insights.state,
insights.last_refresh_time as insight_last_refresh_time
FROM `<project>.<dataset>.recommendations_export` as recommendations,
   `<project>.<dataset>.insights_export` as insights
WHERE DATE(recommendations._PARTITIONTIME) = "<date>"
and DATE(insights._PARTITIONTIME) = "<date>"
and insights.name in unnest(recommendations.associated_insights)

Visualizzazione dei suggerimenti per i progetti che appartengono a una cartella specifica

Questa query restituisce cartelle principali fino a cinque livelli dal progetto.

SELECT *
FROM `<project>.<dataset>.recommendations_export`
WHERE DATE(_PARTITIONTIME) = "<date>"
and "<folder_id>" in unnest(ancestors.folder_ids)

Visualizzazione dei consigli per l'ultima data disponibile esportata finora

DECLARE max_date TIMESTAMP;

SET max_date = (
  SELECT MAX(_PARTITIONTIME) FROM
  `<project>.<dataset>.recommendations_export`
  );

SELECT *
FROM `<project>.<dataset>.recommendations_export`
WHERE _PARTITIONTIME = max_date

Usare Fogli per esplorare i dati di BigQuery

In alternativa all'esecuzione di query su BigQuery, puoi accedere, analizzare, visualizzare e condividere miliardi di righe di dati BigQuery dal tuo foglio di lavoro con Fogli connessi, il nuovo connettore dati BigQuery. Per saperne di più, consulta Iniziare a utilizzare i dati BigQuery in Fogli Google.

Configura l'esportazione utilizzando la riga di comando di BigQuery e l'API REST

  • Ottieni le autorizzazioni necessarie:

    Puoi ottenere le autorizzazioni di Identity and Access Management necessarie tramite la console Google Cloud o la riga di comando.

    Ad esempio, per utilizzare la riga di comando per ottenere l'autorizzazione Recommendationser.resources.export a livello di organizzazione per l'account di servizio:

    gcloud organizations add-iam-policy-binding *<organization_id>* --member=serviceAccount:*<service_acct_name>*' --role='roles/recommender.exporter'

  • Crea set di dati e abilita l'API BigQuery

  • Registra il progetto nell'origine dati BigQuery

    Datasource to use: 6063d10f-0000-2c12-a706-f403045e6250

  • Crea l'esportazione:

    bq mk \
    --transfer_config \
    --project_id=project_id \
    --target_dataset=dataset_id \
    --display_name=name \
    --params='parameters' \
    --data_source=data_source \
    --service_account_name=service_account_name
    

    Dove:

    • project_id è l'ID progetto.
    • dataset è l'ID del set di dati di destinazione per la configurazione del trasferimento.
    • name è il nome visualizzato della configurazione di trasferimento. Il nome del trasferimento può essere qualsiasi valore che consenta di identificare facilmente il trasferimento qualora fosse necessario modificarlo in un secondo momento.
    • parameters contiene i parametri per la configurazione di trasferimento creata in formato JSON. Per BigQuery Export di Suggerimenti e Approfondimenti, devi fornire l'ID organizzazione per il quale è necessario esportare suggerimenti e insight. Parameters format: '{"organization_id":"<org id>"}'
    • data_source Origine dati da utilizzare: "6063d10f-0000-2c12-a706-f403045e6250"
    • service_account_name è il nome dell'account di servizio utilizzato per autenticare l'esportazione. L'account di servizio deve essere di proprietà dello stesso project_id utilizzato per creare il trasferimento e deve avere tutte le autorizzazioni richieste elencate sopra.
  • Gestisci un'esportazione esistente tramite l'interfaccia utente o la riga di comando di BigQuery:

  • Nota: l'esportazione viene eseguita con l'utente che ha configurato l'account, indipendentemente da chi aggiorna in futuro la configurazione di esportazione. Ad esempio, se l'esportazione viene configurata utilizzando un account di servizio e in un secondo momento un utente umano aggiorna la configurazione dell'esportazione tramite l'interfaccia utente di BigQuery Data Transfer Service, l'esportazione continuerà a essere eseguita come account di servizio. In questo caso, il controllo delle autorizzazioni per "Recommender.resources.export" viene eseguito per l'account di servizio ogni volta che viene eseguita l'esportazione.