Correction d’un problème de backfill massif non maîtrisé

Scénario

Contexte : Un DAG planifié quotidiennement a été activé avec plusieurs mois de retard. Le Problème : Airflow déclenche automatiquement des centaines d’exécutions passées (catchup activé), surchargeant le système. Extrait actuel : catchup=True Contraintes : Désactiver le catchup si non nécessaire. Limiter les exécutions simultanées via max_active_runs. Maintenir la cohérence des données. Livrable attendu : Proposer une configuration permettant d’éviter un backfill massif non désiré tout en conservant un contrôle sur les exécutions historiques.

Compétences ciblées