Descriptif du poste:\n\nDans le cadre d'un projet stratégique lié à la gestion des risques climatiques et physiques, nous recherchons un Tech Lead Data Engineer spécialisé en Python, Spark et Google Cloud Platform (GCP).\nVous intégrerez une équipe technique expérimentée en charge de mettre en place une solution permettant d'ingérer, agréger, transformer et exposer des données provenant de sources multiples, afin de produire des données et rapports destinés au suivi et à la surveillance des risques.\nLa mission intervient dans un environnement Data à forts enjeux, avec des problématiques de volumétrie, de fiabilité des données, d'industrialisation et de performance.\nMission: \nEn tant que Tech Lead Data Engineer GCP, vous serez amené à :\n* \nConcevoir et développer des solutions Data en Python / Spark.\n* \nParticiper à l'architecture et à l'intégration de solutions basées sur Google Cloud Platform.\n* \nConcevoir et maintenir des pipelines d'ingestion et de transformation de données.\n* \nTravailler sur des données provenant de sources multiples.\n* \nParticiper à l'industrialisation et à l'automatisation des traitements Data.\n* \nAssurer l'intégration des solutions avec les différents services Cloud.\n* \nContribuer à la qualité, la fiabilité et la performance des traitements.\n* \nParticiper aux choix techniques et à la définition des bonnes pratiques.\n* \nCollaborer étroitement avec les équipes Data, techniques et fonctionnelles.\n* \nParticiper aux activités DevOps et à l'automatisation des déploiements.\n* \nAccompagner l'équipe sur les sujets techniques et contribuer à la résolution des problématiques complexes.\nEnvironnement technique\nData / Cloud\n* \nPython\n* \nApache Spark\n* \nGoogle Cloud Platform\n* \nBigQuery\n* \nDataproc\n* \nCloud Composer\n* \nCloud Functions\n* \nCloud Run Jobs\n* \nGoogle Cloud Storage (GCS)\nDevOps / Industrialisation\n* \nTerraform\n* \nJenkins\n* \nXLD\n\nProfil recherché:\n\nNous recherchons un profil Tech Lead Data Engineer expérimenté, disposant d'une solide expertise dans les environnements Data Cloud.\nCompétences techniques indispensables:\n* \nExcellente maîtrise : BigQuery, Dataproc, Cloud Composer, Cloud Functions, Cloud Run Jobs et Google Cloud Storage (GCS).\n* \nBonne maîtrise de la partie DevOps : XLD, Terraform et Jenkins.\n* \nMaîtrise du développement Data : Python et Apache Spark.\n* \nExpérience sur les environnements Google Cloud Platform (GCP) et l'intégration de solutions Data.\n* \nUne expérience dans le domaine du risque de crédit constitue un plus.\nExpérience:\n* \nExpérience significative en Data Engineering.\n* \nExpérience confirmée sur des environnements Google Cloud Platform.\n* \nExpérience dans la conception et l'industrialisation de pipelines Data.\n* \nExpérience sur des traitements distribués avec Spark.\n* \nUne expérience dans le domaine de la gestion des risques, notamment du risque de crédit, constitue un atout.