Retour aux cas pratiques
Apache SparkFondamental

Agrégation simple avec groupBy et count

Scénario

Contexte Une équipe analytique souhaite compter le nombre de commandes par pays à partir d'un fichier de commandes. Le Problème Le calcul est actuellement réalisé en Python natif avec une boucle, ce qui est inefficace sur un million de lignes. Contraintes Utiliser groupBy() et count() de PySpark. Trier les résultats par nombre de commandes décroissant. Aucune librairie externe. Livrable attendu Un script PySpark calculant le nombre de commandes par pays et affichant le résultat trié.

Compétences ciblées

sparkpysparkgroupbyaggregationdataframe
    Agrégation simple avec groupBy et count — mise en situation Apache Spark | CodeDuel