Ingénieur Data - Automatisation
Intégration au sein du Groupe SVP afin de concevoir et d'automatiser des pipelines d'ingestion de données.
- A conçu et automatisé des pipelines d'ingestion de données multi-sources en Python.
- A créé des DAGs Airflow via Cloud Composer et une orchestration via KubernetesPodOperator et Docker.
- A déployé du monitoring et de l'alerting avec GCP Cloud Monitoring pour prévenir les incidents en production sur les pipelines de données et le backend FastAPI du chatbot.
- A mis en place des tests automatisés et une chaîne CI/CD avec GitHub pour sécuriser les déploiements et prévenir les régressions en production.
- A contribué au développement d'un chatbot juridique basé sur une architecture RAG avec optimisation des prompts et des stratégies de retrieval.
Environnement technique