Optimisation d’un cluster YARN sous forte contention des ressources

Scénario

Contexte : Plusieurs équipes exécutent simultanément des jobs gourmands en ressources sur le même cluster. Le Problème : Les jobs critiques sont ralentis par la concurrence et une mauvaise allocation des containers. Contraintes : Configurer Capacity Scheduler ou Fair Scheduler. Définir des files d’attente avec quotas CPU et mémoire. Assurer l’équité tout en priorisant certains workloads. Livrable attendu : Proposer une configuration YARN avancée permettant une gestion efficace et priorisée des ressources cluster.

Compétences ciblées