Data Engineer

Contribution à la mise en œuvre de la gouvernance des données de référence au sein de l'organisation.

• Participation à la modélisation, au contrôle qualité et au rapprochement des données avec Semarchy xDM.
• Conception et développement de pipelines de données avec Stambia Analytics pour alimenter l'entrepôt de données centralisé.
• Vérification des journaux de processus, optimisation des requêtes SQL et création de vues métier dans Teradata.
• Création de tableaux de bord interactifs dans Power BI pour le service financier et les contrôleurs de gestion.
• Supercision des workflows de production sur les serveurs Linux via des scripts Bash et une automatisation basée sur Cron.
• Réalisation de la surveillance système et collaboration avec les équipes BI, MDM et métier pour garantir la cohérence des données et des rapports.
• Assistance aux travaux de pilotage et de suivi de chargements des TCI.

Collaboration avec les équipes d'OVH Cloud pour développer et administrer les infrastructures de données.

• Développement et automatisation de pipelines de données pour migrer les informations vers plusieurs bases via l’ETL OVH Data Integration.
• Orchestration de la migration de données depuis le Data Lake vers des environnements cibles à l’aide d’ETL personnalisés.
• Administration, monitoring et optimisation de bases de données MongoDB, MySQL et Oracle pour assurer leur performance et leur sécurité.
• Conception et maintenance de tableaux de bord sur Grafana pour le suivi des flux de données et des indicateurs clés.
• Collaboration avec les équipes de cloud privé pour identifier et implémenter des solutions de sauvegarde via Veeam.
• Gestion d'environnements virtualisés avec VMware vSphere et VMware NSX.
• Configuration, scriptage et supervision des systèmes sous Linux pour les traitements de données et la gestion des services.

Intégration d'UICRAFT Consulting pour structurer et automatiser les flux analytiques.

• Intégration des données issues de sources hétérogènes à l’aide de l’ETL Azure Data Factory en automatisant les workflows d’ingestion.
• Conception d'une architecture de données cloud entre Databricks, Snowflake et Power BI.
• Développement et automatisation de flux de transformation sur Snowflake en utilisant SQL et Python dans des notebooks Databricks.
• Mise en place de jobs batch et streaming dans Databricks pour traiter des volumes massifs en temps réel et en différé.
• Optimisation des performances des requêtes SQL et des transformations sur Snowflake par le partitionnement, le clustering et le caching.
• Création, déploiement et maintenance de pipelines de données pour le traitement, la modélisation et l’exposition vers les outils de reporting.
• Collaboration avec les équipes métiers pour industrialiser les flux analytiques et améliorer les temps de réponse dans Power BI.

Développement de la gestion des données au sein de Grohe France.

• Intégration des données dans Amazon Redshift via Amazon S3 en utilisant Talend.
• Assurance de la connexion entre AWS et les tables pour permettre la visualisation des données.
• Exécution du nettoyage et du traitement des données.
• Création de tableaux de bord dynamiques en temps réel avec Tableau desktop.

Réalisation d'une mission de conception d'architecture et d'intégration de données.

• Conception d'une nouvelle architecture de données.
• Conception, développement et automatisation des flux de données pour le traitement, la transformation et l’intégration.
• Application d'algorithmes et de méthodes de la Data Science dans un cadre de recherche sur des données peu explorées.
• Conception et gestion d'une base de données Snowflake.
• Contrôle et gestion de la qualité et de l'intégrité des données via des tests automatisés.
• Assurance d'une veille technologique sur les architectures de données et les nouvelles technologies.