Alternant Data Engineer
Intégration de l'équipe de CLS – Collecte Localisation Satellites pour concevoir un système d'aide à la décision Big Data.
- Conception d'un système d'aide à la décision Big Data exploitant les données de télémétrie IoT pour le pilotage opérationnel des activités, ayant permis d'identifier des opportunités de revenus non captés représentant plus de 10 % du parc analysé.
- Collecte, transformation et intégration de données multi-sources via FME (ETL), SQL et scripts cron pour l'automatisation et l'orchestration des traitements.
- Exploitation des services AWS, Dbvear et de données Big Data stockées aux formats Delta Lake et Apache Iceberg.
- Modélisation et analyse de données, conception d'un entrepôt de données et de magasins de données sur postgreSQL pour structurer les données et répondre aux besoins de pilotage métier.
- Développement et automatisation de dashboards Power BI pour le suivi des indicateurs.
- Industrialisation et benchmark de la solution sur Databricks et Snowflake via l'architecture Lakehouse Médaillon (Bronze/Silver/Gold).
- Développement de pipelines ETL PySpark/SQL et orchestration des workflows sous Databricks et Snowflake intégrant alerting, supervision et suivi des métriques.
Environnement technique