BI / Data Engineer
Intégration de l'équipe de Keyrus sur le projet SMART en tant que BI / Data Engineer pour concevoir et mettre en œuvre une architecture de données moderne.
- A conçu et implémenté un framework d'ingénierie des données piloté par les métadonnées dans Microsoft Fabric afin d'automatiser et de standardiser les flux de travail ETL/ELT.
- A développé des pipelines d'ingestion de données scalables à partir de sources hétérogènes comprenant des bases de données relationnelles, des fichiers et des plateformes de streaming.
- A conçu et implémenté une architecture Medallion (Bronze, Silver, Gold) couvrant l'ingestion, la transformation, la qualité et la consommation analytique des données.
- A implémenté le traitement incrémentiel et des mécanismes SCD Type 2 pour maintenir les données historiques et gérer efficacement les modifications.
- A conçu une architecture de données multi-entreprises scalable pour centraliser et standardiser la gestion des données entre les entités.
- A implémenté l'orchestration, la surveillance, la validation et la gestion des erreurs des pipelines pour améliorer la fiabilisation et la traçabilité.
- A collaboré avec les équipes BI et reporting pour fournir des jeux de données prêts pour l'analyse prenant en charge les tableaux de bord Power BI et les KPI métiers.
Environnement technique