Data Engineer – Stage
Intégration dans l'équipe data d'une plateforme de gestion d'actifs pour concevoir et déployer une architecture de pipelines de données robuste selon le modèle Medallion.
- Conception d'un schéma de tables et de pipelines de bout en bout en Python/SQL selon l'architecture Medallion (bronze/silver/gold) avec pipelines idempotentes, logs intelligents et détection automatisée d'anomalies via SQL.
- Développement d'un outil conversationnel (LLM) permettant d'interroger la base de données en langage naturel plutôt que via des filtres SQL complexes.
- Implémentation de la gestion sécurisée des secrets via Azure Key Vault ; mise en place des premiers tableaux de bord Power BI pour la restitution des indicateurs clés.
Environnement technique