Descriptif du poste: Poste centré sur le développement et l'optimisation de traitements distribués en Spark / Scala, appliqués à des problématiques de sécurité et d'analyse de données à grande échelle, dans un environnement intégrant des technologies d'intelligence artificielle, dont des approches récentes autour du GenAI et des systèmes agents. Ce poste s'adresse à un Data Engineer ayant une expérience concrète en Spark et Scala en production, à l'aise avec les problématiques de performance, de scalabilité et de fiabilité des pipelines, et souhaitant intervenir sur des systèmes où la donnée est utilisée pour analyser des risques, détecter des situations sensibles et renforcer la sécurité des usages. Il ne correspond pas à un profil orienté uniquement Python, ni à un profil Data Analyst ou BI. Vous intervenez dans un environnement international, avec un niveau d'anglais professionnel indispensable, sur des systèmes où la qualité des données, la robustesse des traitements, la réactivité des analyses et la capacité à exploiter la donnée dans des contextes sensibles sont des enjeux structurants. Dans ce cadre, Inovelya recrute un Data Engineer Confirmé, pour une mission longue durée.   Informations clés - Localisation : Sophia Antipolis - Contrat : CDI - Organisation : 3 jours sur site, 2 jours en télétravail   Contexte du projet Vous intervenez sur une plateforme de traitement de données à grande échelle utilisée dans des contextes où la maîtrise des risques et la sécurisation des usages sont essentielles. Les données collectées et analysées permettent d'identifier des situations à risque, en s'appuyant sur des traitements distribués et des mécanismes d'analyse avancée. La plateforme s'inscrit dans un environnement intégrant des approches en IA et GenAI appliquées à l'analyse, à l'exploitation et à la valorisation des données. Les traitements sont conçus pour fonctionner à grande échelle, avec des contraintes fortes en termes de performance, fiabilité, qualité de données, réactivité et maîtrise des coûts.   Vos missions - Concevoir et développer des pipelines de données en Spark / Scala - Identifier et qualifier les sources de données (qualité, fréquence, volumétrie) - Analyser les besoins et contribuer aux choix techniques - Définir des modèles de données optimisés - Optimiser les traitements distribués et leur consommation de ressources - Participer aux phases de test (unitaires, intégration, performance) - Intervenir sur la résolution d'incidents en production - Garantir la cohérence et la qualité des données - Documenter les développements et les choix techniques - Participer à l'amélioration continue des pratiques - Collaborer avec des équipes internationales en anglais   Environnement technique - Spark (obligatoire) - Scala (obligatoire) - Databricks - Hadoop (HDFS) - SQL, Elasticsearch (apprécié) - Python (apprécié) - Azure (apprécié) - Agile / SAFe     Profil recherché: - Diplôme Bac+5 en école d'ingénieur ou formation équivalente à dominante informatique - Minimum 2 ans d'expérience professionnelle en data engineering, en entreprise (hors stage et hors alternance) Important : les expériences de stage et d'alternance ne sont pas comptabilisées dans l'expérience attendue pour ce poste. Nous vous remercions de candidater uniquement si ce critère est respecté. - Expérience indispensable en Spark en production - Expérience indispensable en Scala en production - Expérience sur des pipelines de données distribués à grande échelle - Bonne compréhension des problématiques de performance et de scalabilité - Expérience avec Databricks fortement appréciée - Bonne maîtrise de SQL - Connaissance des environnements Big Data (Hadoop, écosystème associé) - Compréhension des concepts liés à l'IA, au GenAI ou aux systèmes agents appliqués au traitement de données (appréciée) - Sensibilité aux problématiques de qualité de données et de fiabilité des traitements dans des contextes sensibles - Capacité à travailler sur des systèmes complexes et existants - Rigueur, autonomie et capacité d'analyse - Anglais professionnel indispensable (niveau C1) : échanges quotidiens, documentation, réunions