Retour aux cas pratiques
Apache SparkFondamental
Gestion des valeurs nulles dans un pipeline Spark
Scénario
Contexte Un DataFrame de produits contient des valeurs nulles dans les colonnes prix et categorie, bloquant les calculs d'agrégation. Le Problème Les fonctions d'agrégation retournent null dès qu'une valeur manquante est présente. Contraintes Remplacer les nulls de prix par 0.0 avec fillna(). Supprimer les lignes où categorie est null avec dropna(). Aucune librairie externe. Livrable attendu Un script PySpark gérant les nulls de manière appropriée selon la nature de chaque colonne.
Compétences ciblées
sparkpysparknullfillnadropna
