Écriture d’un DataFrame au format Parquet

Scénario

Contexte : Les données transformées doivent être stockées pour des analyses ultérieures. Le Problème : Aucun mécanisme d’écriture optimisé n’est encore en place. Contraintes : Écrire le DataFrame au format Parquet. Activer le mode overwrite si nécessaire. Optimiser la compression par défaut. Livrable attendu : Fournir un exemple de code Spark permettant d’écrire efficacement les données au format Parquet.

Compétences ciblées