Analytics Engineer / Data Engineer

Conception d'une plateforme data au sein de la direction applicative groupe d'Eiffage dédiée au suivi de performance de flottes à partir de données télématiques en temps réel provenant d'engins, camions et véhicules connectés.

• Définition et mise en œuvre de l'architecture data cloud complète sur Azure pour la gestion de données télématiques à grande échelle.
• Conception et développement des pipelines Azure Data Factory pour l'orchestration des flux batch et temps réel.
• Pilotage de la modernisation de l'ingestion API en migrant les flux d'appels API des Azure Functions vers Databricks via des notebooks PySpark pour une meilleure scalabilité.
• Conception et configuration d'Unity Catalog pour assurer le contrôle d'accès granulaire (RBAC) et l'interconnexion sécurisée aux espaces de stockage externes.
• Configuration d'Azure Key Vault (secret scopes) dans l'espace de travail Databricks pour la gestion sécurisée des secrets et jetons API.
• Développement de notebooks Spark SQL réutilisables pour alimenter les tables Delta Lake (Managed/External) et implémentation de Delta Live Tables (DLT).
• Développement de notebooks Databricks (Python / Apache Spark) et mise en place de workflows d'ingestion, transformation et exposition.
• Programmation et automatisation de l'exécution des notebooks d'ingestion et de transformation via Databricks Jobs.
• Mise en place de la supervision, du monitoring centralisé et de l'alerting des pipelines via Azure Log Analytics et Azure Monitor.
• Collecte de données en temps réel via Azure Functions, centralisation via Azure Event Hubs et ingestion des flux continus avec Azure Stream Analytics.
• Développement de tableaux de bord Power BI et optimisation des performances et de la scalabilité de la plateforme data.
• Automatisation des déploiements via pipelines CI/CD Azure DevOps.
• Rôle de référent technique et cadrage des besoins métiers.

Conception d'un tableau de bord de pilotage des performances (ponctualité, composition des trains, bonus/malus) pour la Direction Exploitation de SNCF Transilien en optimisant les datasets pour le Self-Service BI.

• Conception d'un modèle de données en étoile dans Databricks pour l'analyse et le Self-Service BI.
• Collecte, nettoyage et transformation des données en mettant en place des règles de qualité, cohérence et intégrité des datasets.
• Optimisation des traitements et des requêtes pour améliorer les temps de réponse de la plateforme.
• Développement, maintenance et évolution des rapports Power BI répondant aux besoins opérationnels.
• Rédaction de la documentation technique des processus et modèles data.

Conception de solutions data centralisées au sein du département Digital de TotalEnergies E&P Congo destinées à soutenir la prise de décision stratégique et technique des métiers en Afrique de l'Ouest.

• Compréhension et traduction des exigences utilisateurs en solutions techniques ; facilitation des discussions métiers pour aligner les besoins et les capacités.
• Extraction, transformation et chargement (ETL) des données depuis les systèmes sources vers les services Azure via Azure Data Factory et T-SQL.
• Ingestion et structuration des données dans Azure Data Lake, Azure SQL et Azure Synapse Analytics.
• Élaboration de la structure pour la BI et mise en place des flux de transformation avec des règles de nettoyage et de gouvernance données.
• Développement de tableaux de bord et rapports Power BI pour aider les métiers à prendre des décisions basées sur des données fiables.
• Animation de formations utilisateurs pour maximiser l'adoption des solutions BI mises en place.

Participation aux tâches de support informatique et conception d'un tableau de bord de pilotage des KPI du département d'exploitation d'Africanews.

• Mise en place d'une architecture BI et conception d'un entrepôt de données relationnel sous MySQL.
• Développement de scripts ETL pour l'extraction des données Active Directory via Pentaho Data Integration et PowerShell.
• Création de tableaux de bord et rapports via Power BI.
• Support SI auprès des utilisateurs finaux.