Data Engineer

Intégré chez Sopra Steria en tant que Data Engineer pour concevoir des architectures de données.

• A conçu et mis en place des pipelines d'ingestion scalables pour des données supply chain à haut débit pour le client GEODIS.
• A développé et maintenu des DAGs Airflow en production sur Astronomer avec des mécanismes de retry, alerting et monitoring.
• A amélioré la fiabilité et réduit les échecs de jobs en production.
• A automatisé les déploiements et le provisioning d'infrastructure.
• A participé à la migration de Cloudera vers Databricks sur le lakehouse.

A exercé en tant que Data Engineer chez ServicePower pour structurer la plateforme de données.

• A développé des modèles dbt transformant les données source en jeux de données propres et testés.
• A alimenté des dashboards Domo pour le reporting client.
• A mis en œuvre une architecture lakehouse temps réel sur AWS unifiant l'ingestion streaming depuis des sources hétérogènes telles que SQL Server, Oracle et DB2.
• A construit un data lake transactionnel sur Amazon S3 Tables avec Apache Iceberg.
• A gouverné les données via AWS Glue Data Catalog et Lake Formation pour assurer la sécurité et l'évolution des schémas.
• A mis en place un monitoring et un système d'alerting avec Datadog pour détecter les incidents et problèmes de latence.
• A réalisé un benchmark de ClickHouse, DuckDB et Trino pour recommander le moteur de requêtes de la stack analytique.

A rejoint Inveniam pour renforcer les équipes data et MLOps.

• A mis en place des pipelines CI/CD avec Terraform et GitHub Actions pour automatiser le provisioning d'infrastructure.
• A déployé des pipelines de machine learning et d'analyse sur AWS.
• A déployé des pipelines data science avec Amazon MWAA et ECS pour orchestrer des workloads conteneurisés.
• A conçu un pipeline d'archivage automatisé de PostgreSQL vers Amazon S3 validé avec Athena pour garantir zéro perte de données.
• A optimisé les lifecycle policies S3 pour réduire les coûts de stockage.
• A développé des dashboards Domo pour donner de la visibilité aux clients télécom et énergie sur leur usage du produit.

A opéré en tant que Data Engineer en freelance pour Oceano Vox.

• A développé des pipelines ELT automatisés collectant et centralisant des données maritimes de sources hétérogènes via leurs APIs.
• A unifié les flux dans un store centralisé orchestré avec Airflow.
• A conteneurisé les applications avec Docker sur AWS.
• A créé des dashboards Apache Superset sur les données centralisées pour les rendre accessibles à l'analyse.