POSTE : Data Engineer -Transport et Secteur Public H/F DESCRIPTION : Data Engineer F/H -Transport et Secteur Public Description de poste Big Data, Data Science, Data analyse, Data architecture, Ça n'a pas de secret pour vous ? Que vous commenciez votre carrière professionnelle ou que vous soyez spécialiste de l'une de ces disciplines, intégrer notre communauté Data, c'est l'assurance de progresser, innover, partager, vous certifier et rendre service à nos clients. Afin d'accompagner notre client du secteur public dans la mise en place d'une plate-forme de type « Data Fabrique », nous recherchons des candidats ayant un profil de Data Ingénieur expérimenté. La mission consiste à accompagner la migration d'applications existantes dans une nouvelle architecture orientée « Big Data ». Fonctions et responsabilités La mission consiste à intégrer une équipe projet dans la mise en oeuvre d'applicatifs métier dans la nouvelle architecture de type Big Data et la réalisation de nouvelles applications ou la migration d'applications existantes vers cette nouvelle architecture. - Conseil, Audit et Maitrise d'oeuvre - Études d'opportunité, cadrage de projet d'intégration de données et aide au choix de solution - Accompagnement à la mise en place de Data Lake / Big Data. - Accompagnement de profil junior. - Conception et développement de flux d'intégration des données (ETL, ELT, streaming , API ) - Conception et mise en oeuvre de plateformes On Premise ou Cloud de stockage des données dans un Data Lake (Big Data) - Mise en place de platefome Cloud (OVH, AWS, Azure, GCP, OutScale etc.) - Migration des données - Move to Cloud Qualités requises pour réussir dans ce rôle Langages : python, Spark, Pyspark SQL Travaux en mode projet « Agile » Bonne qualité rédactionnelle Rigoureux Capacité à s'intégrer rapidement dans une équipe Capacité à travailler dans un contexte projet exigeant avec un planning de réalisation « tendu » Autres informations sur l'environnement technique (compétences souhaitées) : Framework de transformation : Hadoop, Spark Langage : scala Stockage objet (S3 / Minio) Traitement distribué (Spark, Dremio) sur cluster OpenShift DataViz : DigDash Autres : DBT, Airflow, Nifi, Keycloack, Contexte technique des sources de données : - Bases de données Oracle et PostgreSQL - Cluster Hadoop : HDFS, Hive, Kerberos - BDD OpenSearch CGI est un employeur inclusif et attentif aux candidatures des personnes en situation de handicap, à l'évolution de carrières des hommes et des femmes et au bien-être de nos salariés LGBT+. Dans un souci d'accessibilité et de clarté, le point médian n'est pas utilisé dans cette annonce. Tous les termes employés se réfèrent aussi bien au genre féminin que masculin. En rejoignant CGI, vous bénéficiez notamment d'une offre complète de formations (techniques, métiers, développement personnel,), de flexibilité grâce à notre accord télétravail (jusqu'à 3 jours de télétravail par semaine), d'une politique de congés avantageuse (27 jours de congés payés, RTT, congés ancienneté et enfant malade,) et d'un package d'avantages intéressant (régime d'achats d'actions, participation, CSE,). Ensemble, en tant que propriétaires, mettons notre savoir-faire à l'oeuvre. La vie chez CGI est ancrée dans l'actionnariat, le travail d'équipe, le respect et un sentiment d'appartenance. Chez nous, vous pourrez exploiter votre plein potentiel parce que Nous vous invitons à devenir propriétaire dès le jour 1 alors que nous travaillons ensemble àfaire de notre rêve une réalité. C'est pourquoi nous nous désignons comme associés de CGI, plutôt que comme employés. Nous tirons profit des retombées de notre succès collectif et contribuons activement à l'orientation et à la stratégie de notre entreprise. Votre travail crée de la valeur. Vous élaborerez des solutions novatrices et développerez des relations durables avec vos collègues et clients, tout en ayant accès à des capacités mondiales pour concrétiser vos idées, saisir de nouvelles opportunités, et bénéficier d'une expertise sectorielle et technologique de pointe. Vous ferez évoluer votre carrière en vous joignant à une entreprise bâtie pour croître et durer. Vous serez soutenus par des leaders qui ont votre santé et bien-être à coeur et qui vous permettront de saisir des occasions afin de parfaire vos compétences et élargir les horizons. Joignez-vous à nous, l'une des plus importantes entreprises de conseil en technologie de l'informat