Correction d’un pipeline ne gérant pas les rejets de données invalides

Scénario

Contexte : Certains enregistrements contiennent des formats incorrects ou données corrompues. Le Problème : Le pipeline échoue complètement au lieu d’isoler les lignes invalides. Extrait logique actuelle : Transformation directe sans validation Contraintes : Introduire une zone de rejet. Journaliser les erreurs. Permettre poursuite du traitement valide. Livrable attendu : Proposer une amélioration du design ETL intégrant gestion des rejets et continuité du pipeline.

Compétences ciblées