Data Engineer Confirmée

Intégration d'une équipe data en charge du traitement et de l'optimisation des flux de données critiques pour le secteur énergétique.

• Conception de solutions techniques répondant aux besoins métier exprimés par les différents domaines.
• Développement en Java de traitements robustes incluant la rédaction de tests unitaires et d'intégration.
• Optimisation de requêtes SQL complexes sous Teradata pour améliorer les performances de traitement.
• Automatisation des workflows de données via Apache Airflow, orchestrant les exécutions planifiées.
• Mise en place du déploiement et l'intégration continue avec Jenkins et Kubernetes.
• Assurance de la mise en production et la livraison des développements sur les différents environnements.
• Création et alimentation de rapports Power BI en alignement avec les besoins métiers.
• Réalisation du contrôle qualité du code Java via SonarQube.
• Surveillance des clusters et des traitements en temps réel avec Grafana.
• Gestion du versioning des développements et des livraisons avec Git.
• Exécution de tests automatisés dans l'environnement IntelliJ.
• Consultation des logs techniques via Hadoop HDFS pour le suivi et le diagnostic des traitements de données.

Intégration d'une équipe de data engineering au sein du groupe BNP Paribas pour concevoir et déployer des solutions ETL d'envergure.

• Conception de solutions techniques répondant aux besoins métiers complexes du secteur financier.
• Développement et adaptation de flux ETL à l'aide d'IBM InfoSphere DataStage.
• Réalisation de requêtes et du traitement de données avec Oracle SQL.
• Automatisation et planification des traitements via Control-M.
• Préparation, suivi et livraison des mises en production.
• Analyse des fichiers de logs stockés sur Hadoop HDFS pour assurer le suivi des traitements et faciliter le diagnostic des anomalies.
• Utilisation de Jenkins pour l'intégration continue et Git pour la gestion du versioning.

Intégration d'une équipe data au sein du groupe BPCE pour concevoir et optimiser l'architecture décisionnelle de l'organisation.

• Conception de l'architecture décisionnelle et modélisation des flux de données.
• Transformation et validation des données selon des règles métiers définies.
• Développement de traitements ETL à l'aide de l'outil OTIC.
• Optimisation des performances de chargement et de transformation dans Teradata.
• Planification et supervision des traitements via OPC3.
• Mise en place de pipelines CI/CD via Jenkins avec déploiement automatisé sur différents environnements.
• Gestion du versioning et des livraisons avec Git.
• Création de rapports et de visualisations de données à l'aide de Power BI.
• Assurance de la livraison des développements et du suivi de la mise en production.

Intégration d'une équipe data engineering chez TotalEnergies pour concevoir et développer des solutions ETL en support des besoins analytiques du groupe.

• Recueil des besoins clients pour définir le périmètre des développements.
• Conception et développement de jobs ETL dans IBM InfoSphere DataStage pour l'extraction des données depuis diverses sources.
• Transformation des données en utilisant SQL Server pour exécuter des requêtes complexes.
• Assurance du chargement des données dans le Data Warehouse.
• Automatisation des workflows de données et planification des traitements via Control-M.
• Gestion des versions avec Git et automatisation des déploiements via Jenkins.
• Création de rapports et de visualisations de données à l'aide de Tableau pour répondre aux besoins métiers.