Data Engineer/Analyst

Intégration au sein d'une équipe de 10 personnes pour orchestrer l'intégration des données de projets renouvelables au sein d'Altarea et permettre au métier de suivre l'avancement des projets.

• Cadrage des besoins avec le métier et identification des sources de données à collecter.
• Définition des architectures cibles et des modèles de données pour la construction des rapports Power BI.
• Implémentation des pipelines de collecte de données avec Azure Data Factory.
• Construction du modèle de données sur une base SQL pour le stockage et le reporting.
• Implémentation des dashboards sur Power BI Desktop et partage sur Power BI Service.
• Mise en place du déploiement automatisé via CI/CD sur Azure DevOps.
• Conception d'une application de suivi des projets via Power Apps.
• Rédaction de la documentation d'exploitation et présentation des résultats à l'équipe.

Intégration à l'équipe Stratégie et Analyse de marché pour intégrer les données de prix et production d'électricité en Europe et mettre en place des rapports décisionnels sur Power BI.

• Cadrage des besoins avec le métier pour identifier et définir les sources de données à collecter.
• Rédaction des user stories et définition des KPI pour les dashboards Power BI.
• Mise en place d'une architecture Médaillon pour la collecte et le traitement des données.
• Déploiement de l'infrastructure avec Terraform via GitHub.
• Implémentation des pipelines pour collecter et stocker les données avec Databricks et les services AWS (S3, Lambda, Glue, Athena, EC2, IAM).
• Modélisation des données en schéma en étoile (Tables de Faits et dimensions).
• Création de tables Gold avec Delta Lake (fichiers Parquet) sur Databricks en utilisant Pandas et PySpark.
• Gestion des accès et de la gouvernance des données via Unity Catalog sur Databricks.
• Construction de dashboards interactifs sur Power BI et coaching des équipes métier.
• Animation d'ateliers de prise en main et formation à Power BI.
• Assurance du RUN des pipelines en production.

Intégration au Data Office d'AXA Partners au sein d'une équipe de 5 personnes pour orchestrer l'intégration des données sur une plateforme Hadoop-Spark.

• Conception des pipelines d'intégration de données.
• Déploiement des pipelines en production et assurance de leur monitoring.

Intégration à la DSI au sein d'une équipe de 5 personnes pour intégrer les données avec Azure Data Factory et industrialiser les modèles de data science.

• Cadrage des besoins avec le métier et définition des sources de données à collecter.
• Définition des architectures des pipelines et du déploiement du modèle data science.
• Conception des schémas de données pour le stockage et le reporting sur Azure SQL Database.
• Pilotage de l'implémentation des pipelines sur Azure Data Factory, assurant la transformation et le stockage des données.
• Déploiement du modèle Python avec Azure Docker et orchestration avec Azure Kubernetes.
• Déploiement des pipelines en production et rédaction des documents d'exploitation.