POSTE : Consultant Big Data Hadoop - Spark Aéronautique de TT - Semaine H/F DESCRIPTION : Contexte : Nous recherchons un Consultant Big Data Hadoop/Spark pour rejoindre une équipe Move To Cloud, en charge de la migration du système de Revenue Management vers le cloud Google Cloud Platform (GCP) d'un acteur du secteur de l'aéronautique. Le projet implique une migration technique de données massives et de traitements analytiques, en utilisant des technologies comme Hadoop, Spark, et les services cloud de GCP. L'équipe Move To Cloud est composée de 4 personnes. VOTRE QUOTIDIEN En tant que Consultant Big Data, vous intégrerez l'équipe Move To Cloud pour effectuer la migration du système de Revenue Management dans le cloud GCP. Vous interviendrez principalement sur la mise en oeuvre de solutions Big Data sur GCP afin de migrer des données et des pipelines Hadoop/Spark existants vers une infrastructure cloud et assurer la cohérence, la sécurité et l'efficacité des systèmes migrés. Migration vers Google Cloud Platform (GCP) : - Accompagner l'équipe dans la migration des systèmes et des pipelines de données basés sur Hadoop et Spark vers le cloud GCP. - Déployer des solutions Big Data dans l'environnement Google Cloud, en utilisant des services tels que Google BigQuery et Google Cloud Storage. - Assurer l'intégrité, la performance et la sécurité des données migrées tout au long du processus de migration. - Participer à l'optimisation des processus de gestion et d'analyse des données sur GCP. Expertise Technique Hadoop/Spark : - Utiliser des frameworks Hadoop et Spark pour la gestion et l'analyse de données massives dans le cloud. - Participer à la conception, au développement et à la maintenance des pipelines de données de grande envergure. - Implémenter des solutions scalables et performantes adaptées aux besoins de la compagnie aérienne. Développement et Scripting : - Utiliser des langages comme Java et Python pour le développement de solutions de traitement de données sur GCP. - Écrire des scripts pour automatiser la gestion des données, leur traitement et leur migration entre différentes plateformes. PROFIL : Techniques - Big Data Frameworks : Expertise en Hadoop, Spark pour le traitement de données massives. - Langages de Programmation : Maîtrise de Java et Python pour la gestion des données et le développement des pipelines. - Google Cloud Platform (GCP) : Bonne connaissance des services GCP, notamment Google BigQuery, Google Cloud Storage et autres outils cloud. - Bases de données et SQL : Solide compréhension du SQL et expérience avec des bases de données dans un environnement Big Data. - Migration Cloud : Expérience en migration de solutions Big Data vers le cloud, en particulier vers Google Cloud. Fonctionnelles - Compréhension des besoins métier dans le cadre du Revenue Management pour adapter les solutions Big Data aux objectifs de la compagnie aérienne. - Capacité à analyser des volumes de données complexes et à proposer des solutions optimisées pour les traiter dans le cloud. - Anglais : Niveau B2 minimum requis pour communiquer efficacement dans un environnement international. SAVOIR-ÊTRE - Leadership et Coaching : Expérience de mentorat et capacité à travailler de manière autonome tout en soutenant les autres membres de l'équipe. - Communication : Excellente capacité à communiquer clairement des informations techniques et à interagir avec des équipes diverses.