Cloud Azure Engineer
Participation à un projet de Data Lake dans un environnement Cloud Azure afin de structurer et valoriser les données sources.
- Organisation d'ateliers et cadrage des besoins avec les équipes fournisseuses de données sources.
- Mise en place de règles métier pour générer de nouvelles tables.
- Implémentation de contrôles de qualité des données.
- Développement de pipelines d'ingestion sur Azure Data Factory pour la mise à disposition des données stockées dans Azure Data Lake Storage.
- Mise en place du processus CI/CD pour Data Factory et DataBricks en utilisant Azure DevOps.
- Rédaction de la documentation et validation des processus avec les équipes métiers.
- Développement de rapports en utilisant Power BI.
Environnement technique