Retour aux cas pratiques
Apache SparkFondamental

Correction d’un problème de schéma inféré incorrectement

Scénario

Contexte : Un fichier CSV est chargé dans Spark sans schéma explicite. Le Problème : Certaines colonnes numériques sont interprétées comme STRING, provoquant des erreurs lors des calculs. Extrait actuel : spark.read.option("header", true).csv("sales.csv") Aucun schéma n’est défini. Contraintes : Définir explicitement un schéma StructType adapté. Garantir la compatibilité avec les calculs numériques. Livrable attendu : Proposer une version corrigée du chargement avec un schéma explicite permettant des opérations arithmétiques fiables.

Compétences ciblées

schemadataframebugfixetlbig-data
    Correction d’un problème de schéma inféré incorrectement — mise en situation Apache Spark | CodeDuel