Data Engineer
Participation au projet Canopée pour mettre en place le socle de données pour le programme de décommissionnement du réseau cuivre d'Orange. ▸ Développement et adaptation de Cloud Functions Python pour automatiser les traitements métier, incluant l'extraction de données depuis BigQuery et la génération de fichiers CSV alimentant QGIS. ▸ Développement d'APIs publiées sur les services Orange permettant aux équipes métier d'extraire leurs données via une IHM dédiée. ▸ Traitement et gestion de données confidentielles hébergées sur MariaDB en environnement on-premise, en assurant la sécurité et la conformité des accès tout au long du pipeline. ▸ Mise en place d'une chaîne CI/CD et déploiement de l'infrastructure via Terraform pour des mises en production fiables et reproductibles. ▸ Ordonnancement des pipelines de données avec Airflow, permettant la planification, la supervision et le chaînage automatisé des traitements. ▸ Gestion des droits IAM pour sécuriser les accès aux ressources GCP. ▸ Implémentation de tests unitaires PyTest pour garantir la qualité des données source et la conformité des données transformées en sortie de pipeline. ▸ Développement de dashboards Looker pour faciliter le suivi des données par les équipes métier et accompagnement à la mise en production.
Environnement technique