Descriptif du poste: Dans le cadre d'un programme de modernisation de la plateforme décisionnelle d'un acteur majeur du secteur des services, le consultant interviendra en tant que Data Engineer Senior afin de concevoir et déployer un dispositif d'observabilité et de contrôle qualité des données sur l'ensemble de la chaîne de traitement analytique. La mission vise à renforcer la fiabilité, la traçabilité et la supervision des flux de données stratégiques alimentant les outils de reporting et d'aide à la décision. Le consultant sera notamment en charge de : - Définir les indicateurs techniques et fonctionnels permettant de mesurer la qualité et la performance des flux de données ; - Concevoir l'architecture cible du framework de Data Quality et d'Observabilité ; - Mettre en œuvre les mécanismes de contrôle qualité sur les différentes couches de données ; - Développer et automatiser les tests de cohérence, d'intégrité référentielle, de complétude et de fraîcheur des données ; - Superviser les pipelines d'ingestion et de transformation afin d'identifier les anomalies et dérives de fonctionnement ; - Mettre en place des mécanismes de monitoring et d'alerting proactifs ; - Structurer et historiser les métriques de qualité et de performance des traitements ; - Participer à l'industrialisation des processus de contrôle et d'exploitation ; - Contribuer à l'amélioration continue des pratiques Data Engineering et DevOps ; - Assurer la documentation des solutions mises en œuvre et le transfert de compétences auprès des équipes internes. Livrables attendus : - Framework d'observabilité et de contrôle qualité des données ; - Jeux de tests automatisés et règles de validation ; - Tableaux de bord de supervision et de suivi des indicateurs ; - Dispositifs d'alerting et de notification automatisés ; - Modèles de stockage et d'historisation des métriques ; - Documentation d'architecture et d'exploitation ; - Guides de bonnes pratiques et supports de transfert de connaissances ; - Rapports d'analyse et recommandations d'amélioration continue. Profil recherché: Pour réussir dans le rôle de Data Engineer, vous possédez une expertise avancée en gestion de bases de données et en déploiement d'architectures Big Data. Vous êtes titulaire d'un diplôme en informatique, en mathématiques appliquées ou dans un domaine connexe. Vous avez une expérience significative dans l'utilisation d'outils tels que Hadoop, Spark, et Kafka. Votre capacité à concevoir et optimiser des pipelines de données robustes est essentielle. Vous maîtrisez les langages de programmation Python et SQL et êtes à l'aise avec les environnements cloud tels qu'AWS ou Google Cloud. Doté d'une grande rigueur analytique, vous pouvez interpréter des données complexes pour en tirer des recommandations stratégiques. Votre savoir-faire en intégration continue et déploiement continu (CI/CD) vous permet de maintenir des processus de développement efficaces. Proactif et innovant, vous possédez une excellente aptitude à travailler en équipe tout en étant capable de gérer des projets de manière autonome. Votre communication claire vous distingue dans la collaboration avec des équipes pluridisciplinaires pour développer des solutions de bout en bout. Rejoindre notre équipe, c'est contribuer à des projets ambitieux dans un environnement technologique en constante évolution, avec des opportunités d'épanouissement professionnel.