Visualizzare i log della pipeline in Cloud Logging

Questa pagina spiega come attivare Cloud Logging per la tua istanza Cloud Data Fusion e come visualizzare i log della pipeline.

Prima di iniziare

Crea un'istanza Cloud Data Fusion. Il processo di creazione dell'istanza richiede fino a 30 minuti.

Abilita Cloud Logging

Per utilizzare Cloud Logging con la pipeline Cloud Data Fusion, abilita Cloud Logging quando crei l'istanza Cloud Data Fusion.

  1. Nella console Google Cloud, apri la pagina Istanze.
  2. Fai clic su Crea istanza.
  3. Fai clic su Mostra opzioni avanzate.

  4. In Logging e monitoraggio, fai clic su Attiva servizio di logging di Stackdriver.

    Attiva Cloud Logging.

Dopo aver creato l'istanza, non puoi attivare Cloud Logging nella console Google Cloud. Esegui invece questo comando gcloud CLI:

gcloud beta data-fusion instances update INSTANCE_NAME \
  --project=PROJECT_ID \
  --location=LOCATION \
  --enable_stackdriver_logging

Visualizza i log

A ogni esecuzione della pipeline Cloud Data Fusion viene assegnato un RunID univoco. Dopo aver eseguito il deployment della pipeline ed eseguito la relativa esecuzione, individua il relativo RunID. Quindi, in logging, utilizza RunID per visualizzare i log della pipeline.

Ottieni il RunID della pipeline

  1. Vai all'istanza:

    1. Nella console Google Cloud, vai alla pagina Cloud Data Fusion.

    2. Per aprire l'istanza in Cloud Data Fusion Studio, fai clic su Istanze e poi su Visualizza istanza.

      Vai a Istanze

  2. Fai clic su Riepilogo > Tabella.

  3. Fai clic sul link RunId da copiare.

    Copia RunID.

Visualizzare i log in Esplora log

  1. Vai alla pagina Logging Cloud > Esplora log nella console Google Cloud:

    Vai a Esplora log

  2. Nei menu dei filtri, selezionare Cluster Cloud Dataproc > cdap-PIPELINE_NAME-YOUR_RUNID.

    Vai a Cloud Logging.

(Facoltativo) Filtra i log

Utilizza i menu dei filtri per filtrare i log. Puoi filtrare in base a vari livelli di gravità dei log o a componenti come datafusion-pipeline-logs.

(Facoltativo) Scarica i log

Fai clic su Scarica log.

Per ulteriori informazioni, consulta la documentazione di Cloud Logging per il download delle voci di log.

Passaggi successivi