Data Engineer

Intégration de l'équipe data chez My Money Bank dans le cadre d'une alternance pour concevoir et maintenir une plateforme de données Cloud AWS.

• Conception d'un data pipeline d'audit des traitements ETL sur Data Platform AWS, dans un contexte réglementaire bancaire.
• Collecte de logs multi-sources via une architecture hybride event-driven et un système de monitoring.
• Traitement et structuration des données dans un Data Lake pour assurer la traçabilité et l'analyse des exécutions.
• Mise en place d'un pipeline batch automatisé avec un déclenchement quotidien sans intervention manuelle et une orchestration via Airflow.
• Déploiement d'architectures serverless et de traitements data avec Glue et EMR.
• Industrialisation des processus via Terraform et des pratiques de CI/CD.
• Visualisation des données pour l'audit, le monitoring et l'exploitation métier.

Réalisation d'un stage de recherche à l'étranger axé sur l'analyse et la comparaison de frameworks distribués de Federated Learning pour des environnements IoT.

• Analyse et comparaison de frameworks distribués de Federated Learning pour environnements IoT.
• Étude de pipelines d'apprentissage décentralisés incluant des approches de clustering et des algorithmes spécifiques.
• Analyse d'architectures distribuées optimisées pour la réduction des coûts de communication et d'énergie.
• Exploration et amélioration d'une implémentation existante pour l'apprentissage fédéré.
• Proposition d'un framework hybride combinant architecture décentralisée et optimisation énergétique.