Intégrateur d'application BIG DATA
Il a intégré l'équipe technique de CTI en tant qu'Intégrateur d'application Big Data afin de concevoir et industrialiser les flux de traitement et d'intégration de données.
- A analysé les besoins métiers et conçu les flux d’intégration et de traitement des données.
- A développé et automatisé l’ingestion des données sur la plateforme.
- A transformé et enrichi les données, notamment avec des indicateurs métiers.
- A orchestré et automatisé les traitements.
- A développé les dispositifs de contrôle et de supervision de la qualité et de la cohérence des données et des fichiers.
- A assuré le suivi des traitements et des métriques.
- A analysé les besoins métiers et conçu la solution d’alimentation Power BI.
- A intégré, préparé, transformé, enrichi et agrégé les données pour les besoins de restitution.
- A modélisé et alimenté les tables PostgreSQL.
- A orchestré et automatisé les traitements d’alimentation via des DAG Airflow.
- A développé les rapports Power BI et mis en œuvre la sécurité des données via la RLS et les groupes AD.
- A assuré la supervision et le suivi des traitements et des alimentations.
- A analysé les besoins de supervision et défini les indicateurs de suivi des différents cas d’usage.
- A centralisé les données de supervision des différents traitements de la plateforme.
- A développé un DAG Airflow pour générer et consolider les données de supervision.
- A alimenté les tables PostgreSQL à partir des fichiers de supervision agrégés.
- A conçu un rapport Power BI pour le suivi des incidents, volumes, nombre et statut des fichiers.
- A automatisé l’alimentation et la mise à jour des données de supervision.
- A analysé les besoins des équipes métiers et les a accompagnés dans l’exploitation des services de la plateforme Data.
- A assuré le support technique et accompagné les phases exploratoires.
- A accompagné les métiers dans la préparation et l’exploitation des données pour leurs propres indicateurs.
- A géré les clés d’accès et participé à la gestion des habilitations.
- A paramétré l’envoi et l’intégration des fichiers vers la plateforme Data.
- A participé au diagnostic et à la résolution des incidents liés aux flux et aux traitements.
Environnement technique