Visualizzare i log della pipeline in Cloud Logging

Questa pagina spiega come abilitare Cloud Logging per i tuoi dell'istanza Cloud Data Fusion e come visualizzare i log della pipeline.

Prima di iniziare

Crea un'istanza Cloud Data Fusion. Il completamento del processo di creazione dell'istanza richiede fino a 30 minuti.

Abilita Cloud Logging

Per utilizzare Cloud Logging con la pipeline Cloud Data Fusion, abilita Cloud Logging quando crei l'istanza Cloud Data Fusion.

  1. Nella console Google Cloud, apri la pagina Istanze.
  2. Fai clic su Crea istanza.
  3. Fai clic su Mostra opzioni avanzate.

  4. In Logging e monitoraggio, fai clic su Attiva servizio di logging di Stackdriver.

    Abilita Cloud Logging.

Dopo aver creato l'istanza, non puoi abilitare Cloud Logging nel nella console Google Cloud. Esegui invece questo comando gcloud CLI:

gcloud beta data-fusion instances update INSTANCE_NAME \
  --project=PROJECT_ID \
  --location=LOCATION \
  --enable_stackdriver_logging

Visualizza i log

A ogni esecuzione della pipeline di Cloud Data Fusion viene assegnato un RunID univoco. Dopo il giorno esegui il deployment e l'esecuzione della pipeline, trova il relativo RunID. Poi, nel Logging, utilizza RunID per visualizzare la pipeline logaritmi.

recupera il RunID della pipeline

  1. Vai all'istanza:

    1. Nella console Google Cloud, vai alla pagina di Cloud Data Fusion.

    2. Per aprire l'istanza in Cloud Data Fusion Studio: Fai clic su Istanze e poi su Visualizza istanza.

      Vai a Istanze

  2. Fai clic su Riepilogo > Tabella.

  3. Fai clic sul link RunId da copiare.

    Copia RunID.

Visualizza i log in Esplora log

  1. Vai a Cloud Logging > Pagina Esplora log nella console Google Cloud:

    Vai a Esplora log

  2. Nei menu dei filtri, selezionare Cluster Cloud Dataproc > cdap-PIPELINE_NAME-YOUR_RUNID.

    Vai a Cloud Logging.

(Facoltativo) Filtra i log

Utilizza i menu dei filtri per filtrare i log. Puoi filtrare in base a vari livelli di gravità dei log o a componenti come datafusion-pipeline-logs.

(Facoltativo) Scarica i log

Fai clic su Scarica log.

Per ulteriori informazioni, consulta la documentazione di Cloud Logging per il download delle voci di log.

Passaggi successivi