Data Engineer
Intégration d'Orange France pour fournir des données fiables et à jour aux équipes de prévision afin d'anticiper les volumes d'interventions, les effectifs et le chiffre d'affaires.
- Réalisation d'un audit technique et métier pour concevoir la migration de traitements PHP obsolètes vers Python.
- Conception de 4 pipelines ETL de bout en bout avec Python, Pandas et Airflow, gérant l'ingestion de flux quotidiens de plus de 100 000 enregistrements et hebdomadaires de plus de 20 000.
- Migration des sources SAP BO vers BigQuery pour accélérer l'ingestion des données.
- Détection et correction des erreurs de dates et de calcul présentes dans l'ancien code pour fiabiliser les données destinées aux prévisionnistes.
- Réduction du temps de traitement de manière significative, notamment de 12 à 2 minutes sur un pipeline et de 1 heure à 15 minutes sur un autre.
- Travail en méthodologie Agile en collaboration avec les équipes DevOps, développement et métier.
- Accompagnement des autres développeurs pour faciliter la compréhension et le déploiement du code.
Environnement technique