Contexte et objectif de la mission La mission consiste à mettre en place de nouveaux produits accompagnant la transition technologique de la plateforme et des pratiques associées. Elle inclut également l'accompagnement de l'équipe dans la montée en compétence sur les outils du socle, notamment DBT, Kafka, Kafka Connect et Trino. Responsabilités principales - Concevoir, implémenter et documenter des pipelines d'ingestion et de transformation (DBT, Kafka Connect, Trino). - Mettre en place des modèles de données optimisés et conformes aux standards du socle. - Participer à la migration et à l'optimisation des traitements depuis Cloudera/Spark vers les nouvelles technologies (Kafka / Trino / Iceberg). - Intégrer les développements dans la chaîne CI/CD, en lien avec les pratiques de déploiement du socle. - Participer à la gestion des habilitations et du contrôle des accès, en cohérence avec les principes de sécurité et la conformité RGPD. - Contribuer à la mise en place d'outils d'observabilité (logs, monitoring, audit des accès, performance des jobs). - Accompagner les membres de l'équipe dans la prise en main des outils DBT et Kafka. - Partager les bonnes pratiques de développement, de testing et de gestion du code (revues, documentation, mentoring). - Être force de proposition sur l'amélioration continue du socle et des workflows de développement. - Collaborer étroitement avec le Tech Lead, les Product Owners et les Data Stewards pour assurer la cohérence des modèles et des processus. - Participer activement aux rituels agiles (daily, sprint planning, review, rétrospective). Profil recherché - Expérience confirmée en Data Engineering et en conception de pipelines de données. - Maîtrise des environnements distribués et des architectures modernes de données. - Connaissance des bonnes pratiques de développement, CI/CD et observabilité. - Capacité à travailler en équipe, à partager son expertise et à accompagner la montée en compétence des collaborateurs. - Esprit d'initiative et force de proposition dans un contexte de transformation technologique. Compétences requises Kafka DBT Python Trino