Cette page explique la journalisation des pipelines dans Cloud Data Fusion.
Pour chaque exécution de pipeline de données, Cloud Data Fusion génère des journaux pour vous aider à surveiller les exécutions de pipeline de données et à déboguer les problèmes. Dès qu'une exécution de pipeline commence, vous pouvez afficher les journaux et les filtrer par niveau de journalisation.
Vous pouvez accéder aux journaux dans la version Preview de Cloud Data Fusion Studio. et la page Détails du pipeline. Pour surveiller la progression d'un pipeline, cliquez sur Journaux pendant son exécution.
Filtrer les journaux par niveau
Lorsque vous affichez les messages de journal du pipeline, vous pouvez les filtrer par type ou par journaliser niveau 0:
- Erreur
- Avertissement
- Information
- Déboguer
- Trace
Pour définir le niveau de journalisation, accédez à l'onglet Aperçu de Cloud Data Fusion Studio. ou sur la page Détails du pipeline, puis cliquez sur Journaux > Niveau. Sélectionnez les types de messages que vous souhaitez afficher dans le journal.
Afficher les journaux de base ou avancés
Pour chaque exécution de pipeline, vous pouvez afficher des journaux de base ou avancés. Les journaux de base incluent des messages sur les étapes du pipeline. Les journaux avancés incluent tous les messages de journal de base, ainsi que des informations sur l'état du cluster et le moteur d'exécution.
Pour afficher les journaux avancés lors d'un aperçu ou d'une exécution de pipeline, accédez à la page Aperçu ou Détails du pipeline de Cloud Data Fusion Pipeline Studio, puis cliquez sur Journaux > Afficher les journaux avancés.
Pour revenir à l'affichage des journaux de base, cliquez sur Masquer les journaux avancés.
Afficher les messages de journal les plus récents
Si vous exécutez un pipeline avec un grand nombre de messages, vous pouvez accéder au bas de la page pour afficher les derniers messages. Accédez à la page Aperçu ou Détails du pipeline de Cloud Data Fusion Studio, puis cliquez sur Journaux > Défiler.
Téléchargement des journaux
Pour résoudre les problèmes de débogage, une fois l'exécution d'un pipeline terminée, vous pouvez télécharger un fichier journal qui inclut tous les messages de journal et de trace de pile avancés.
Pour télécharger le fichier journal, accédez à l'API Cloud Functions page Aperçu ou Détails du pipeline, puis cliquez sur Journaux > Tout télécharger.
Pour afficher le journal brut en texte brut dans un nouvel onglet du navigateur, cliquez sur Télécharger all > Afficher les journaux bruts.
Étape suivante
- Apprenez-en plus sur l'orchestration des pipelines.