Hadoop
Avancé
Correction d’un job échouant à cause d’un mauvais dimensionnement YARN
Type d'évaluation
Mise en situation réelle
Analyse
Intelligence Artificielle
Compétences ciblées
yarn
memory
resource-management
bugfix
cluster
Scénario Technique
Contexte : Plusieurs jobs MapReduce sont exécutés simultanément sur le cluster. Le Problème : Certains jobs échouent avec des erreurs liées à l’allocation mémoire des containers YARN. Extrait actuel : yarn.scheduler.maximum-allocation-mb=2048 Les besoins réels des jobs dépassent cette limite. Contraintes : Ajuster les paramètres YARN sans compromettre la stabilité du cluster. Équilibrer ressources CPU et mémoire. Livrable attendu : Proposer une configuration YARN optimisée permettant d’éviter les échecs liés au manque de ressources.
Prêt à évaluer ce talent ?
Accédez à l'interface de test complète pour soumettre votre architecture ou votre code.