- Accueil France Travail
- Emploi
- Val-de-Marne
- Charenton-le-Pont
- Détail de l'offre 2475804
- Accueil France Travail
- Emploi
- Val-de-Marne
- Charenton-le-Pont
- Détail de l'offre 2475804
Data engineer Finlake (IT) (H/F) 94 - CHARENTON LE PONT
Offre n° 2475804
Data engineer Finlake (IT) (H/F)
94 - CHARENTON LE PONT - Localiser avec Mappy
Publié le 19 février 2025
Contexte / Objectifs : La mission va se dérouler au sein de l'IT Financement dans l'équipe Business intelligence qui aujourd'hui développe et gère un datalake (FinLake). Ce datalake est utilisé comme une data plateforme pour les équipes IT et métiers. L'objectif de la mission est d'assurer le rôle de Data Engineer du Finlake : - Gestion de la production - Gestion de la dette technique - Revoir l'architecture actuelle et proposer des évolutions - Développements liés aux projets Description : ? Mettre en place la collecte et la mise à disposition des données au sein de l?entreprise ? Industrialiser et mettre en production des traitements sur les données (par exemple : mise à disposition de tableaux de bords, intégration de modèles statistiques) en lien avec les équipes métiers et les équipes qui les analysent Activités et tâches : ? Acheminement de la donnée ? Mise à disposition de la donnée aux équipes utilisatrices ? Mise en production de modèles statistiques ? Suivi de projet de développement ? Développement job spark ? Traitement et ingestion de plusieurs formats des données ? Développement des scripts ? Développement et Implémentation des collectes de données, des jobs de traitement et Mapping de données ? Développement des moyens de restitution via génération de fichier et ou API & Dashboarding ? Collecter toutes les données et les fournir aux clients en tant qu'API ou fichiers ? Développer de pipelines d'ingestion à partir de différentes sources (streaming et batch) ainsi que des spark jobs le prétraitement des données et calcul des indicateurs de performance (KPI) ? Développer des API génériques d?ingestion et de traitement de données dans un environnement HDP ? Participer à la conception, mise en place et administration de solutions Big Data ? Participation à l?installation, administration et configuration des Hadoop clusters. Mise en place en Spring Boot des services d'extraction de data du système legacy (tera data), la data sera par la suite envoyée au data lake via des topics Kafka ? Normalisation et agrégation des données afin de produire les rapports sous forme de Business View Profil candidat: Expertises spécifiques : - Spark - PySpark - Scala - Hadoop sur infra on premise - Hive - Starburst - Jenkins - Unix/Bash - Jira - Pipeline CI/CD Idéalement XLDeploy/XLRelease
- Type de contrat
-
Contrat à durée indéterminée
Contrat travail
Profil souhaité
Expérience
- Débutant accepté
Informations complémentaires
- Qualification : Cadre
D'autres offres peuvent vous intéresser :
(déjà vu)
Ingénieur Systèmes Broadcast H/F (H/F)
42 CONSULTING - 75 - PARIS 20
Rejoignez une mission d'exception dans le monde du Broadcast ! Passionné(e) par l'univers de la TV et des technologies de diffusion ? Cette opportunité est faite pour vous ! Nous recherchons un...
CDI - Temps plein
Publié il y a 8 jours
CDI
Temps plein(déjà vu)
Data Scientist (H/F)
EXTERN ISC - 75 - Paris
Extern ISC est une société de conseil à taille humaine. En pleine expansion, EISC est spécialisée dans 5 grands domaines d'expertise (Consulting, Engineering, Staffing, Support et Training), afin...
CDI - Temps plein
Publié il y a 5 jours
CDI
Temps plein(déjà vu)
Data engineer (H/F)
75 - PARIS 16
Nous sommes les experts de la Data Engineering. Nous accompagnons les scale-ups et les grands groupes dans la définition, la mise en place et l'évolution de leur Data-Platform. Grâce à nos...
CDI - Temps plein
Publié il y a 9 jours
CDI
Temps plein(déjà vu)
Architecte IT Senior (H/F)
SYNOPSIA INGENIERIE - 75 - PARIS 02
SYNOPSIA est une société de Service et d'Ingénierie Informatique à taille humaine. Créée en 1999, elle accompagne depuis 20 ans ses clients dans la concrétisation de leurs projets numériques, en...
CDI - Temps plein
Publié il y a 17 jours
CDI
Temps plein(déjà vu)
Développeur Data Analyst Tsql (H/F)
SYNOPSIA INGENIERIE - 75 - PARIS 02
SYNOPSIA est une société de Service et d'Ingénierie Informatique à taille humaine. Créée en 1999, elle accompagne depuis 20 ans ses clients dans la concrétisation de leurs projets numériques, en...
CDI - Temps plein
Publié il y a 19 jours
CDI
Temps plein(déjà vu)
Technicien Réseaux dédiés audiovisuel (H/F)
SHOWSON - 93 - MONTREUIL
Nous recherchons notre Ingénieur Réseaux Audiovisuels et Informatique pour rejoindre notre équipe. Le candidat idéal sera responsable de l'étude, l'installation, la configuration et la maintenance...
CDI - Temps plein
Publié il y a 3 jours
CDI
Temps plein(déjà vu)
Expert ou Experte Offres de Connectivité (H/F)
SNCF GARE DE ST DENIS STADE DE FRANCE - 75 - Paris
Expert ou Experte Offres de Connectivité Publiée le 17/02/2025 Description de l'employeur Rejoignez un environnement stimulant et des équipes passionnées qui mettent leur talent et leur savoir-faire...
CDI - Temps plein
Publié il y a 3 jours
CDI
Temps plein(déjà vu)
Développeur Data Analyst Tsql (H/F)
SYNOPSIA INGENIERIE - 75 - PARIS 02
SYNOPSIA est une société de Service et d'Ingénierie Informatique à taille humaine. Créée en 1999, elle accompagne depuis 20 ans ses clients dans la concrétisation de leurs projets numériques, en...
CDI - Temps plein
Publié il y a 19 jours
CDI
Temps plein(déjà vu)
Ingénieur Visioconférence et Communications Unifiées (H/F)
SNAPCOM - 78 - Montigny-le-Bretonneux
Pour conforter un positionnement de leader sur un marché à fort potentiel, SNAPCOM recherche : Un Expert Visioconférence / Communications unifiées niveau 2/3 Votre défi : Intégrer et renforcer...
CDI - Temps plein
Publié il y a 9 jours
CDI
Temps plein(déjà vu)
Ingénieur Projets Systèmes d'Information (F/H) (H/F)
MAIRIE - 95 - GARGES LES GONESSE
En s'appuyant sur les objectifs définis et la stratégie de développement du S.I., vous assurez la chefferie des projets de digitalisation de la collectivité en impulsant une dynamique et en apportant...
CDI - Temps plein
Publié il y a 22 jours
CDI
Temps plein
Découvrez d'autres services web
Réussir son CV et sa lettre de motivation
Suscitez l’intérêt du recruteur et donnez-lui envie de vous rencontrer.
B.A.BA Entretien
Apprenez à préparer votre prochain entretien.
Informations sur le marché du travail
Accédez aux informations et statistiques sur ce métier.
Simulateurs d'aides et allocations en cas de reprise d'emploi
Estimez vos futures ressources financières sur les 6 prochains mois.
- Voir plus de services (Emploi store)