Data Engineer
Intégration au sein d'une équipe data d'une plateforme de gestion de mobilité urbaine afin de concevoir et développer des solutions d'intégration et d'orchestration de données.
- Analyse des demandes et besoins métiers en participant aux ateliers de cadrage avec l'ensemble des parties prenantes.
- Transformation des demandes en spécifications fonctionnelles et techniques claires.
- Rédaction des mappings techniques et des règles de gestion des données.
- Conception de l'architecture des flux de données et choix des outils et technologies adaptés.
- Développement des flux selon les solutions techniques définies.
- Automatisation des traitements via des orchestrateurs et les pipelines CI/CD pour l'automatisation des déploiements.
- Réalisation de tests unitaires, tests d'intégration, tests de données et de performance.
- Pilotage de la recette fonctionnelle des développements.
- Documentation des traitements et des flux pour assurer leur maintenabilité.
- Travail en mode Scrum agile.
- Gestion du run : analyse et correction des anomalies issues des traitements des flux.
- Conception et participation au développement d'une solution de POC pour exploiter et modéliser les données collectées par des caméras, incluant les mappings techniques, le développement sur Databricks, la conception Power BI et la réalisation de la recette.
Environnement technique