CASE - DATA PROCESSING

NOTRE DÉFI

Traitement massif des données pour reconstruire 3 ans d’historique des ventes avec 150 attributs et mesures décrivant chaque produit dans tous les magasins Coles en Australie.

LE CONTEXTE

Au sein du département des données de Coles, nous faisons partie de l’équipe qui construit un historique rapide et une grande table stockant les ventes historiques de chaque article Coles (produit) et les événements externes avec 3 ans d’historique. L’objectif est de prévoir les demandes et d’optimiser la chaîne d’approvisionnement. Chaque magasin Coles en Australie a une gamme d’articles – tous les produits dans les magasins. L’équipe d’ingestion de données travaille avec l’équipe de scientifiques des données pour construire une table maîtresse historique rapide et massive. Les spécialistes des données entraînent leurs modèles d’intelligence artificielle avec ce tableau afin de prévoir les demandes des clients dans chaque magasin.

LE PROJET

╋ Construire une table Oracle Exadata principale afin de maximiser le traitement par lots et les déclarations SQL et fournir des données détaillées pour former les demandes de prévision Coles AI.
╋ Consolidation de l’information historique pour 50 millions d’éléments – fusionnés et conservés à partir des données DWH, des systèmes opérationnels de l’entreprise et des sources externes.
╋ Ingestion de sources de données externes : obtenir à partir de diverses interfaces les informations localisées les plus utiles pour enrichir les modèles d’IA (par exemple : à partir du Bureau of Meteorology/BOM et pour chaque magasin australien, les données de prévisions météorologiques de la station BOM la plus proche).