Data Engineer
Intégration de l'équipe technique d'ADLIN Science afin d'automatiser et d'optimiser les flux de données omiques.
- Optimisation et automatisation des pipelines Big Data de données omiques pour améliorer le traitement et la fiabilité globale.
- Développement d'un pipeline ETL complet intégrant et traitant des données omiques et cliniques issues de GEO, GDC et PRIDE.
- Modularisation et scalabilisation de scripts exploratoires pour les transformer en solutions génériques réutilisables.
- Implémentation de bonnes pratiques d'ingénierie des données comprenant des tests automatisés, le versioning et le packaging.
- Automatisation du chargement des données (Load) dans les outils internes pour optimiser la disponibilité des données.
Environnement technique