Apache Airflow
Avancé
Correction d’un problème de backfill massif non maîtrisé
Type d'évaluation
Mise en situation réelle
Analyse
Intelligence Artificielle
Compétences ciblées
dag
catchup
backfill
configuration
automation
Scénario Technique
Contexte : Un DAG planifié quotidiennement a été activé avec plusieurs mois de retard. Le Problème : Airflow déclenche automatiquement des centaines d’exécutions passées (catchup activé), surchargeant le système. Extrait actuel : catchup=True Contraintes : Désactiver le catchup si non nécessaire. Limiter les exécutions simultanées via max_active_runs. Maintenir la cohérence des données. Livrable attendu : Proposer une configuration permettant d’éviter un backfill massif non désiré tout en conservant un contrôle sur les exécutions historiques.
Prêt à évaluer ce talent ?
Accédez à l'interface de test complète pour soumettre votre architecture ou votre code.