Data Engineer
CapgeminiIssy-les-MoulineauxOct. 2024 – Aujourd'hui
Intervention chez Capgemini en tant que Data Engineer au sein de différents projets et missions pour concevoir et industrialiser des solutions de données.
- Analyse des besoins et des périmètres fonctionnels pour différents cas d'usage métier sur Palantir Foundry.
- Réalisation de l'ingestion et de l'intégration de données au sein de l'écosystème Foundry.
- Analyse et traitement des données en collaboration étroite avec les équipes métier.
- Conception de règles de détection des ruptures de rayon et gestion des alertes pour un projet dans la grande distribution.
- Correction et analyse des anomalies de données.
- Traduction des besoins métier en solutions data à partir de user stories priorisées.
- Conception de pipelines de transformation multi-zones (Bronze → Diamond) avec Spark/Scala sur Databricks pour la RATP.
- Rédaction et mise en œuvre de contrats d'interface (ICD) pour renforcer la fiabilité des échanges de données.
- Définition et implémentation de règles métier de nettoyage et de validation.
- Mise en œuvre et suivi des processus CI/CD avec GitLab dans un environnement Agile/Scrum.
- Conception d'une plateforme cloud-native pour des projets d'IA générative dans le cadre d'un projet interne.
Environnement technique
Palantir FoundrySQLGitLabPythonGCPBigQueryCloud StorageCloud composerMiroOracleSpark/ScalaDatabricksAWSJiraPower BIpySpark