Nesta página, explicamos como ativar o Cloud Logging para sua instância do Cloud Data Fusion e como visualizar registros de pipeline.
Antes de começar
Crie uma instância do Cloud Data Fusion. O processo de criação da instância leva até 30 minutos para ser concluído.
Como ativar o Cloud Logging
Para usar o Cloud Logging com o pipeline do Cloud Data Fusion, ative o Cloud Logging ao criar a instância do Cloud Data Fusion. Depois de criar a instância, não será possível ativar o Cloud Logging.
- No Console do Cloud, abra a página Instâncias.
- Clique em Criar instância.
- Clique em Exibir opções avançadas.
Em Geração de registros e monitoramento, clique em Ativar o serviço de geração de registros do Stackdriver.
Ver registros
Cada execução do pipeline do Cloud Data Fusion recebe um RunID
exclusivo. Depois de implantar e executar o pipeline, encontre o RunID
dele. Em seguida, no Logging, use o RunID
para ver os registros do pipeline.
Como encontrar o RunID do pipeline
- Acesse o Pipeline Studio na IU do Cloud Data Fusion.
- Clique em Resumo.
- Na página Resumo, clique na guia Tabela.
Clique no link
RunId
para copiar.
Ver registros
Acesse a página Visualizador de registros do Cloud Logging no Console do Cloud.
Usando o menu suspenso Recursos auditados arrow_drop_down, selecione Cluster do Cloud Dataproc >
cdap-PIPELINE_NAME-YOUR_RUNID
.
Como filtrar registros
Use os menus suspensos de filtro arrow_drop_down para filtrar os registros. É possível filtrar por vários níveis de registro ou por componentes, como datafusion-pipeline-logs
.
Fazendo download de registros
Clique em Fazer o download de registros.
Para mais informações, consulte a documentação do Cloud Logging para fazer o download de entradas de registro.
A seguir
- Saiba mais sobre o Cloud Data Fusion.
- Siga as etapas indicadas no tutorial.