Query e visualizzazione dei log in Analisi dei log

Questo documento descrive come eseguire query e visualizzare i log archiviati in bucket di log di cui è stato eseguito l'upgrade per l'uso dell'analisi dei log. Puoi eseguire query sui log in questi bucket utilizzando SQL, che ti consente di filtrare e aggregare i log. Per informazioni sulle funzionalità di Analisi dei log di Cloud Logging, consulta Panoramica dell'analisi dei log.

Quando esegui l'upgrade di un bucket di log per utilizzare Analisi dei log, non limiti le tue a Esplora log. Puoi continuare per risolvere i problemi e visualizzare delle voci di log in questi bucket utilizzando Esplora log.

Per informazioni su come eseguire l'upgrade di un bucket di log da utilizzare Analisi dei log, consulta i seguenti documenti:

Prima di iniziare

  1. Per ottenere le autorizzazioni necessarie per utilizzare Analisi dei log ed eseguire attività come la creazione di set di dati collegati, chiedi all'amministratore di concederti i seguenti ruoli IAM sul tuo progetto:

    Per saperne di più sulla concessione dei ruoli, consulta Gestire l'accesso.

    Potresti anche riuscire a ottenere le autorizzazioni richieste tramite la ruoli o altri ruoli predefiniti ruoli.

  2. Per le viste dei log su cui vuoi eseguire una query, vai alla pagina Archiviazione dei log e verificare che i bucket di log archiviano di queste viste log viene eseguito l'upgrade dell'analisi dei log. Se necessario, eseguire l'upgrade del bucket di log.

    Nella console Google Cloud, vai alla pagina Archiviazione dei log:

    Vai ad Archiviazione dei log

    Se utilizzi la barra di ricerca per trovare questa pagina, seleziona il risultato con il sottotitolo Logging.

  3. (Facoltativo) Se vuoi eseguire query sui dati di log utilizzando un set di dati BigQuery, quindi crea un set di dati BigQuery collegato.

Eseguire una query su una vista log

Per risolvere un problema, è consigliabile conteggia le voci di log con un campo corrispondente a un pattern o latenza media di calcolo per richiesta HTTP. Puoi eseguendo queste azioni eseguendo una query SQL su una vista log.

Per inviare una query SQL a una vista:

  1. Nella console Google Cloud, vai alla pagina Analisi dei log:

    Vai ad Analisi dei log

    Se utilizzi la barra di ricerca per trovare questa pagina, seleziona il risultato con il sottotitolo Logging.

  2. Nell'elenco Viste log individua la vista e seleziona Query. La Il riquadro Query viene compilato con una query predefinita, che include le nome della tabella su cui viene eseguita la query.

    Puoi anche inserire una query nel riquadro Query o modificare una query visualizzata.

    Per impostare l'intervallo di tempo della query, utilizza il selettore dell'intervallo di tempo oppure aggiungi una clausola WHERE che specifica il campo timestamp. I nostri suggerimenti utilizzare il selettore dell'intervallo di tempo per specificare l'intervallo di tempo.

    Se specifichi un timestamp nella query, questo sostituisce il valore intervallo di tempo selezionato nel selettore dell'intervallo di tempo e dell'intervallo di tempo è disabilitata. Per utilizzare il selettore dell'intervallo di tempo, rimuovi le espressioni timestamp dalla clausola WHERE nella query.

  3. Nella barra degli strumenti, fai clic su Esegui query.

    La query viene eseguita e il risultato viene mostrato nel Scheda Risultati.

    Puoi utilizzare le opzioni della barra degli strumenti per formattare la query, cancellarla e apri la documentazione di riferimento su SQL di BigQuery.

Visualizzare lo schema di una vista

Lo schema di una vista log ne definisce la struttura e il tipo di dati per ogni campo. Queste informazioni sono importanti per te perché determinano come crei le tue query. Ad esempio, supponiamo di voler calcolare il latenza media delle richieste HTTP. Devi sapere come accedere alla latenza e se è archiviato come un numero intero come 100 o archiviato come stringa come "100". Quando i dati di latenza vengono archiviati come stringa, la query deve trasmettere il valore a un valore numerico prima di calcolare una media.

Quando il tipo di dati di una colonna è JSON, lo schema non elenca i campi disponibili per quella colonna. Ad esempio, una voce di log può avere campo con il nome json_payload. Quando viene eseguito l'upgrade di un bucket di log per l'utilizzo Analisi dei log, il campo è mappato a una colonna con un tipo di dati JSON. Lo schema non indica i campi secondari della colonna. Vale a dire che non è possibile utilizzare lo schema per determinare se json_payload.url è un riferimento valido.

Per identificare lo schema per una vista:

  1. Nella console Google Cloud, vai alla pagina Analisi dei log:

    Vai ad Analisi dei log

    Se utilizzi la barra di ricerca per trovare questa pagina, seleziona il risultato con il sottotitolo Logging.

  2. Nell'elenco Viste log individua la vista, quindi seleziona la nome della vista.

    Viene visualizzato lo schema della tabella. Puoi utilizzare il campo Filtro per individuare campi specifici. Non puoi modificare lo schema.

Salva una query

Tutte le query che esegui vengono salvate automaticamente 30 giorni e sono accessibili selezionando la scheda Recenti nella pagina Analisi dei log. Puoi cercare, visualizzare, eseguire e condividere query elencate nella scheda Recenti.

Se vuoi mantenere una query disponibile per uso futuro, annotala con informazioni utili per te o lascia che i membri del tuo team visualizzino ed eseguono la query, quindi salva la query. Puoi cercare e ordinare le query salvate in base nome, la descrizione e l'etichetta di visibilità. Puoi inoltre modificare ed eliminare queste query. Le query salvate vengono conservate finché non elimini che li rappresentano.

Puoi salvare 10.000 query per progetto Google Cloud.

Console

Per salvare una query:

  1. Nella console Google Cloud, vai alla pagina Analisi dei log:

    Vai ad Analisi dei log

    Se utilizzi la barra di ricerca per trovare questa pagina, seleziona il risultato con il sottotitolo Logging.

  2. Compila il riquadro Query con una query.

    Puoi completare il riquadro Query inserendo una nuova query. selezionando una query dalla scheda Recenti o Selezionando una query dalla scheda Salvati.

    Quando la query nel riquadro Query è valida, l'opzione Salva di sia abilitata.

  3. Fai clic su Salva e inserisci i campi Nome e Descrizione campi. I valori impostati per questi campi vengono mostrati nella scheda Salvati .

  4. (Facoltativo) Per consentire a tutti gli utenti che hanno accesso all'app Analisi dei log per la vista del progetto Google Cloud ed esegui una query salvata, attiva l'opzione Condividi con il progetto.

    Per impostazione predefinita, questa opzione è disattivata e la visibilità è limitata a te.

  5. Fai clic su Salva query.

  6. (Facoltativo) Per visualizzare, ordinare ed eseguire le query salvate visibili a te, seleziona la scheda Salvati.

    Puoi ordinare e filtrare le query salvate in base al nome, alla descrizione e dell'etichetta di visibilità. Puoi anche filtrare in base ai contenuti della query.

Puoi modificare ed eliminare le query che hai creato utilizzando le opzioni in la scheda Salvati:

  • Per modificare una query: fai clic su Altre opzioni e seleziona Modifica. Puoi modificare i valori dell'attributo Name (Nome) e Description (Descrizione); tuttavia, la query stessa non può essere modificato.

  • Per eliminare una query salvata: fai clic su Altre opzioni e seleziona Elimina.

API

Per salvare una query con l'API Logging, utilizza il metodo savedQueries.create. Per ulteriori informazioni su questo metodo, parametri e i dati di risposta, consulta la pagina di riferimento per savedQueries.create

Puoi eseguire il metodo savedQueries.create utilizzando il metodo Widget Explorer API nella pagina di riferimento del metodo. Per Per le query di Analisi dei log, devi specificare il campo opsAnalyticsQuery. La L'esempio seguente illustra il corpo di una richiesta di esempio, che contiene un istanza di SavedQuery:

{
  "parent": "projects/my-project/locations/global"
  "saved_query":
  {
     "ops_analytics_query":
     {
        "sql_query_text" :
           "SELECT
           timestamp, log_name, severity, json_payload, resource, labels
           FROM
           `TABLE`
           WHERE
           timestamp > TIMESTAMP_SUB(CURRENT_TIMESTAMP(), INTERVAL 1 HOUR)
           ORDER BY timestamp ASC
           LIMIT 100"
     }
     "visibility": "PRIVATE"
  }
}

Condividere una query

Console

Durante la risoluzione di un problema o quando vedi risultati anomali, potresti vuoi condividere una query e i suoi risultati con un membro del team. Quando è attiva la visualizzazione risultati della query sulla pagina Analisi dei log, puoi copiare un URL che, quando viene aperto, visualizza la query che hai eseguito e i relativi risultati.

Per condividere una query e i risultati con un membro del team:

  1. Nella console Google Cloud, vai alla pagina Analisi dei log:

    Vai ad Analisi dei log

    Se utilizzi la barra di ricerca per trovare questa pagina, seleziona il risultato con il sottotitolo Logging.

  2. Compila il riquadro Query con una query, quindi fai clic su Esegui query.

    Puoi completare il riquadro Query inserendo una nuova query. selezionando una query dalla scheda Recenti o Selezionando una query dalla scheda Salvati.

  3. Fai clic su Condividi link.

  4. Invia il link al tuo compagno di squadra.

    Quando un membro del tuo team apre il link, viene aperta la pagina Analisi dei log. Questa pagina visualizza la query che hai eseguito e i relativi risultati.

    Per aprire l'URL correttamente, il ruolo Identity and Access Management di un membro del tuo team del progetto Google Cloud devono includere le autorizzazioni necessarie per visualizzare Pagine di logging.

API

Puoi utilizzare l'API Logging per creare una query condivisa tramite: utilizzando il metodo savedQueries.Create e specificando il valore SHARED in il campo visibility.

Visualizzare ed eseguire query recenti o salvate

Per visualizzare o eseguire nuovamente una query, seleziona la scheda Recenti nella pagina Analisi dei log e trova la query:

  • Per eseguire la query, fai clic su Esegui.
  • Per visualizzare la query, utilizza le opzioni nella Menu Altre opzioni.

Per visualizzare, modificare o eseguire una query salvata, seleziona la scheda Salvati nella pagina Analisi dei log e trova la query:

  • Per eseguire la query, fai clic su Esegui.
  • Per modificare, visualizzare o eliminare la query, utilizza le opzioni nella Menu Altre opzioni.

Query sui log con BigQuery

Una volta eseguito l'upgrade di un bucket di log per l'uso di Analisi dei log, puoi visualizzare i dati in BigQuery anche creando un set di dati BigQuery collegato. Con questa configurazione, puoi utilizzare BigQuery per unire i dati di log, accessibile tramite il set di dati collegato, con gli altri dati aziendali. Per informazioni su come creare un elemento del set di dati, consulta Concedi a BigQuery l'accesso in visualizzazione a un bucket di log.

Per eseguire query su un set di dati collegato:

  1. Nella console Google Cloud, vai alla pagina Analisi dei log:

    Vai ad Analisi dei log

    Se utilizzi la barra di ricerca per trovare questa pagina, seleziona il risultato con il sottotitolo Logging.

  2. Nell'elenco Viste log individua la vista e seleziona Query. La Il riquadro Query viene compilato con una query predefinita.

    Puoi anche inserire una query nel riquadro Query o modificare una query visualizzata.

  3. Nella barra degli strumenti, fai clic su Esegui in BigQuery.

    Si apre la pagina BigQuery Studio. FROM dell'istruzione di query viene modificata per specificare il percorso della vista tramite l'API BigQuery Sintassi del percorso della tabella.

    Puoi anche modificare la query visualizzata.

  4. Fai clic su Esegui query.

Passaggi successivi