Dans le cadre de la création d?une nouvelle plateforme Data, le Data Engineer Senior intervient sur l?ensemble du cycle de vie de la donnée.<br/> Il conçoit, développe et maintient des pipelines de données batch et streaming en Spark et Python, contribue à la mise en place d?une architecture Lakehouse moderne, et garantit la qualité, la fiabilité et la sécurité des données.<br/> <br/> Le rôle inclut l?industrialisation des traitements (CI/CD, DataOps), l?observabilité, la documentation et une forte collaboration avec les équipes techniques et métiers.<br/> <br/> Data Engineering : Spark (batch & streaming), Python, SQL<br/> <br/> <br/> Streaming : Kafka<br/> <br/> <br/> Plateforme Data : architectures Lakehouse<br/> <br/> <br/> Accès & requêtage : Trino<br/> <br/> <br/> Industrialisation : Git, CI/CD, DataOps, Docker, Kubernetes<br/> <br/> <br/> Qualité & observabilité : data quality, lineage, monitoring<br/> <br/> <br/> Environnements : On-Prem, Cloud privé, Hybride<br/> <br/> <br/> Transverse : collaboration, documentation, sécurité by design<br/> <br/> <br/> <br/>