Retour aux cas pratiques
dbtAvancé
Implémentation d’un modèle incrémental pour optimiser les temps de build
Scénario
Contexte : Une table transformée contient plusieurs centaines de millions de lignes et le build complet prend trop de temps. Le Problème : Le modèle est matérialisé en table classique et est reconstruit intégralement à chaque exécution. Contraintes : Utiliser la matérialisation incremental. Définir une clé unique pertinente. Implémenter une logique conditionnelle avec is_incremental(). Garantir l’intégrité des données. Livrable attendu : Proposer un modèle dbt incrémental permettant de charger uniquement les nouvelles données ou mises à jour.
Compétences ciblées
incrementalmodelperformancedata-warehouseoptimization