Wesco avait besoin d'une plateforme de données hautement performante, capable de traiter et d'intégrer en continu les flux de données brutes provenant de son architecture e-commerce. Cette architecture repose sur plusieurs technologies clés comme Kinesis, AWS Glue et Delta Lake. L'objectif était de mettre en place un système robuste permettant d'extraire rapidement les informations pertinentes et essentielles pour la prise de décision stratégique, l'optimisation des opérations commerciales et l'amélioration continue de l'expérience client.
Il était crucial de s’interfacer efficacement avec le système existant pour garantir une intégration fluide des nouvelles fonctionnalités sans perturber les opérations en cours. Identifier les indicateurs clés de performance à mesurer et proposer une visualisation via Looker (GCP) pertinente des données étaient également essentiels pour faciliter l'interprétation des informations et soutenir une prise de décision rapide et éclairée à tous les niveaux de l'organisation.
Notre mission a consisté à mettre en place un lakehouse moderne et performant pour Wesco.
L'un des principaux atouts de ce lakehouse est qu'il permet de raccourcir significativement les durées et volumes de traitement data, donnant ainsi accès à des analyses toujours plus rapides et pertinentes.
Avec la mise en place du lakehouse de Wesco intégrant des technologies avancées pour la collecte, le traitement et la visualisation des données (Looker), les utilisateurs peuvent accéder à des insights riches et actualisés, optimisant ainsi les processus opérationnels et stratégiques. L'utilisation de Maxwell Daemon au niveau Log MySql puis pipeline service managés AWS à permis une approche intéressante et de bon résultats pour réduire le temps et coûts de maintenance des pipelines avec une meilleure “surveillance” des flux en amont.
Pour finir, les tableaux de bord offrent une vue unifiée et cohérente des principaux indicateurs de performance, facilitant ainsi le suivi des activités en temps réel et permettant une prise de décision plus rapide et éclairée.
Il est nécessaire d’avoir une approche stratégique et technique pour la visualisation de la donnée. Le client a besoin de prendre des décisions informées.
Maxime ROUSSEAU
Directeur Conseil Smile