Visualizzazione dei log della pipeline in Cloud Logging

Questa pagina spiega come abilitare Cloud Logging per l'istanza Cloud Data Fusion e come visualizzare i log della pipeline.

Prima di iniziare

Crea un'istanza di Cloud Data Fusion. Il completamento della procedura di creazione dell'istanza richiede fino a 30 minuti.

Attivazione di Cloud Logging

Per utilizzare Cloud Logging con la pipeline di Cloud Data Fusion, abilita Cloud Logging quando crei l'istanza di Cloud Data Fusion.

  1. In Google Cloud Console, apri la pagina Istanze.
  2. Fai clic su Crea istanza.
  3. Fai clic su Mostra opzioni avanzate.

  4. In Logging e monitoraggio, fai clic su Abilita il servizio di logging di Stackdriver.

    Abilita Cloud Logging.

Dopo aver creato l'istanza, non puoi abilitare Cloud Logging in Google Cloud Console. Esegui invece questo comando dell'interfaccia a riga di comando gcloud:

gcloud beta data-fusion instances update INSTANCE_NAME \
  --project=PROJECT_ID \
  --location=LOCATION \
  --enable_stackdriver_logging

Visualizzazione dei log

A ogni esecuzione della pipeline di Cloud Data Fusion viene assegnato un RunID univoco. Dopo aver eseguito il deployment e l'esecuzione della pipeline, trova RunID. Quindi, in Logging, utilizza RunID per visualizzare i log della pipeline.

Recupero della pipeline di RunID

  1. Vai a Pipeline Studio nella UI di Cloud Data Fusion.
  2. Fai clic su Riepilogo.
  3. Nella pagina Riepilogo, fai clic sulla scheda Tabella.

  4. Fai clic sul link RunId per copiare.

    Copia RunID.

Visualizzazione dei log

  1. Nella pagina Esplora log di Cloud Logging in Google Cloud Console:

    Vai alla pagina Esplora log

  2. Nei menu dei filtri, seleziona Cloud Dataproc Cluster > cdap-PIPELINE_NAME-YOUR_RUNID.

    Vai a Cloud Logging.

Filtrare i log

Utilizza i menu del filtro per filtrare i log. Puoi filtrare in base a vari livelli di gravità dei log o in base a componenti come datafusion-pipeline-logs.

Download dei log in corso

Fai clic su Scarica i log.

Per ulteriori informazioni, consulta la documentazione di Cloud Logging per il download delle voci di log.

Passaggi successivi