Consultante Data Engineer/Analyst
Intégration d'une équipe data du secteur automobile pour industrialiser le traitement des données véhicules (ECU) via Azure Databricks.
- Développement de pipelines ETL avec SQL, Python et PySpark pour la collecte, transformation et distribution des données.
- Écriture de requêtes SQL avancées (jointures, agrégations, sous-requêtes, fonctions analytiques) pour structurer et transformer les données.
- Conception d'une modélisation des données (tables de faits et dimensions) optimisant l'exploitation analytique et la performance.
- Automatisation et orchestration des workflows de données pour industrialiser les traitements.
- Développement de scripts PySpark pour améliorer la scalabilité et la performance des traitements.
- Conception de dashboards et suivi des KPI via Power BI répondant aux besoins métier.
- Collaboration avec les équipes techniques via Github.
- Participation aux rituels Agile et utilisation d'Azure DevOps pour le suivi des développements et la livraison continue.
Environnement technique