Ingénieure en Intelligence Artificielle
Intégration d'Anouar Market pour concevoir une architecture Big Data et automatiser le traitement des données de ventes.
- Conception d'une architecture Big Data avec MySQL, ClickHouse et Docker pour l’analyse de plusieurs dizaines de millions de transactions.
- Création d'un pipeline ETL Python pour la synchronisation quotidienne des données MySQL vers ClickHouse.
- Optimisation des requêtes SQL et réalisation de la modélisation analytique avec dénormalisation et pré-calcul des JOINs, réduisant le temps de réponse de 57 s à 0,4 s.
- Développement d'une API REST FastAPI connectée à ClickHouse et intégrée à une interface Next.js pour les données de ventes et de stock.
- Automatisation des processus avec n8n : extraction quotidienne des ventes J-1 depuis ClickHouse, sauvegarde sur Google Drive et envoi automatique d’un rapport aux équipes financières.
Environnement technique