- Accueil France Travail
- Emploi
- Hauts-de-Seine
- Boulogne-Billancourt
- Détail de l'offre 5290051
- Accueil France Travail
- Emploi
- Hauts-de-Seine
- Boulogne-Billancourt
- Détail de l'offre 5290051
CONSULTANT DATA ENGINEER AZURE, SPARK, SCALA F/H - Système, réseaux, données (H/F) 92 - BOULOGNE BILLANCOURT
Offre n° 5290051
CONSULTANT DATA ENGINEER AZURE, SPARK, SCALA F/H - Système, réseaux, données (H/F)
92 - BOULOGNE BILLANCOURT - Localiser avec Mappy
Publié le 04 octobre 2024
Descriptif du poste: Conception et Développement de Pipelines de Données : Concevoir, développer et déployer des pipelines de données scalables et performants en utilisant Apache Spark et Scala sur la plateforme Azure. Intégrer, transformer et traiter des volumes massifs de données provenant de diverses sources (bases de données, systèmes de fichiers, APIs) pour les rendre exploitables par les équipes de data science et d'analyse. Implémenter des solutions de traitement en temps réel et par batch, en optimisant les performances des pipelines de données. Architecture et Infrastructure Big Data : Concevoir et mettre en œuvre des architectures de données robustes et évolutives sur Azure, en utilisant des services comme Azure Data Lake, Azure Databricks, et Azure Synapse Analytics. Gérer les environnements de stockage, les bases de données distribuées, et les outils d'orchestration pour garantir la disponibilité, la performance, et la sécurité des données. Participer à la définition et à l'optimisation des architectures data-driven pour supporter les besoins croissants en analyse et en machine learning. Optimisation et Performance : Optimiser les performances des jobs Spark en ajustant la configuration des clusters, en implémentant des stratégies de partitionnement et en réduisant les temps d'exécution des tâches. Assurer une gestion efficace des ressources sur Azure pour minimiser les coûts tout en maintenant une haute performance des pipelines de données. Implémenter des stratégies de monitoring et de debugging pour identifier et résoudre rapidement les goulots d'étranglement et les problèmes de performance. Sécurité et Gouvernance des Données : Mettre en œuvre des politiques de gouvernance des données, incluant la gestion des accès, la conformité aux réglementations (comme le GDPR) et la sécurité des données sur l'ensemble des environnements. Utiliser des outils comme Azure Key Vault et Azure Active Directory pour gérer les identités, les accès et les clés de chiffrement. Participer à l'élaboration de stratégies de sauvegarde, de récupération et de continuité des opérations pour assurer la résilience des systèmes de données. Collaboration et Méthodologie Agile : Collaborer avec les équipes de data scientists, d'analystes et d'ingénieurs logiciels pour comprendre les besoins métier et traduire ces besoins en solutions techniques efficaces. Travailler en méthodologie Agile, participer aux sprints, aux daily stand-ups et aux rétrospectives pour assurer un développement itératif et rapide. Documenter les solutions, partager les bonnes pratiques et former les autres membres de l'équipe sur les technologies Azure, Spark et Scala. Innovation et Veille Technologique : Rester à jour sur les dernières avancées en big data, cloud computing et technologies d'ingénierie des données. Profil recherché: Diplôme en informatique, génie logiciel, ou équivalent. Expérience confirmée en ingénierie des données avec une expertise en Scala et Apache Spark, et une connaissance approfondie des services Azure (Azure Data Lake, Azure Databricks, Azure Synapse). Compétence en conception et optimisation de pipelines de données à grande échelle, ainsi qu'en gestion de clusters big data. Bonne maîtrise des concepts de sécurité des données, de gouvernance et de conformité réglementaire dans des environnements cloud. Expérience avec les bases de données relationnelles et NoSQL, ainsi que les technologies de traitement de données distribuées.
- Type de contrat
-
Contrat à durée indéterminée
Contrat travail - Salaire
- Salaire brut : A négocier
Profil souhaité
Expérience
- Expérience exigée de 5 An(s)Cette expérience est indispensable
Informations complémentaires
- Qualification : Cadre
- Secteur d'activité : Ingénierie, études techniques
Entreprise
Rihen BEN HADID
Cabinet de conseil en Hautes Technologies, SIDEXIA est un acteur dynamique intervenant sur des projets innovants et d'envergure. Notre réputation tient à la performance hautement qualifiée de nos collaborateurs. Dynamique et à taille humaine, SIDEXIA accompagne ses clients sur l'ensemble des phases de leurs projets stratégiques: Médias, Agence Web, Assurance, Télecoms, Banque/Finance, Industrie ....
D'autres offres peuvent vous intéresser :
- (déjà vu)
(H/F)Administrateur réseaux informatique
LYNX RH TERTIAIRE - 75 - Paris 4e Arrondissement
LYNX RH Paris Ouest est un cabinet de recrutement en CDI, CDD, et intérim de profils à BAC +2 à Bac +5 spécialisés en : - Informatique : conseil, développement, réseaux et télécommunications,...
Intérim - Temps plein
Publié il y a 17 jours Soyez parmi les 1ers à postuler
Intérim
Temps plein - (déjà vu)
Administrateur systèmes et réseaux informatique (F/H)
EXPECTRA - 92 - Levallois-Perret
Au sein d'un service composé d'un responsable informatique et de 2 administrateurs, vous intervenez dans le cadre d'un renfort d'équipe suite à un projet en cours. Vous traitez toutes demandes et...
CDD - Temps plein
Publié il y a 4 jours
CDD
Temps plein - (déjà vu)
Administrateur base de données SQL Server (H/F)
ABIL RESSOURCES - 92 - NEUILLY SUR SEINE
Missions Rattaché au pôle infrastructure composé de 6 personnes, vous expérience vous permet de bien appréhender une infrastructure (+ création de poste) : - Analyser comment la donnée est structuré...
CDI - Temps plein
Publié il y a 17 jours Soyez parmi les 1ers à postuler
CDI
Temps plein - (déjà vu)
Data administrator (H/F)
HOLLISTERFOX - 78 - Maurepas
Nous recherchons pour notre client (fourniture de matière métallurgique et sous-traitance de supply-chain) un(e) data-administrator (H/F). Le (la) DATA Administrator supervise et optimise toutes les...
CDI - Temps plein
Publié il y a 3 jours
CDI
Temps plein - (déjà vu)
Coordonnateur de plateforme téléphonique H/F (H/F)
MSA ILE DE FRANCE - 94 - GENTILLY
Entreprise La Mutualité Sociale Agricole (MSA) est une entreprise de droit privé qui assure une mission de service public. La MSA est le deuxième régime de protection sociale en France et prend en...
CDI - Temps plein
Publié aujourd'hui
CDI
Temps plein - (déjà vu)
Administrateur systèmes et réseaux informatique (F/H)
EXPECTRA - 75 - Paris 17e Arrondissement
Rattaché au directeur informatique, vous avez pour mission d'assurer le maintien en conditions opérationnelles de l'infrastructure informatique du groupe. Environnement : environ 150 utilisateurs...
CDI - Temps plein
Publié il y a 11 jours
CDI
Temps plein - (déjà vu)
Administrateur / Administratrice réseau informatique (H/F)
GROUPE HOSPITALIER UNIVERSITAIRE PARIS - - 75 - PARIS 14
DESCRIPTION DE LA DIRECTION HIERARCHIQUE La Direction de l'Innovation Technologique et du Système d'Information (DITSI) comprend les secteurs d'activités suivants : - Unité Projets et Supports...
CDI - Temps plein
Publié il y a 2 jours
CDI
Temps plein - (déjà vu)
Référent Equipe et Gestion Parc Informatique (H/F)
HOPITAL RAYMOND POINCARE - 92 - BOULOGNE BILLANCOURT
Situé à Boulogne-Billancourt dans les Hauts-de-Seine, l'hôpital Ambroise-Paré AP-HP est un établissement de référence de l'ouest francilien dédié aux activités de phase aiguë en hospitalisation et en...
CDI - Temps plein
Publié il y a 8 jours
CDI
Temps plein - (déjà vu)
Administrateur (rice) CRM (H/F)
PROMOTRANS FORMATION PROFESSIONNELLE CON - 92 - LEVALLOIS PERRET
Dans le cadre de notre développement, nous recherchons un.e nouveau.elle héros.ine : un.e Administrateur.rice CRM pour rejoindre nos équipes de Geeks. Si vous avez le talent de manier les données...
CDI - Temps plein
Publié il y a 4 jours
CDI
Temps plein - (déjà vu)
Administrateur Bases de données PostgreSQL MariaDB Devops (H/F)
COGICIA DMTS - 75 - Paris
Notre client travaille dans le monde entier pour fournir une assistance humanitaire aux personnes touchées par les conflits et la violence armée. Il intervient en réponse aux situations d'urgence et...
CDI - Temps plein
Publié il y a 11 jours
CDI
Temps plein
Découvrez d'autres services web
Réussir son CV et sa lettre de motivation
Suscitez l’intérêt du recruteur et donnez-lui envie de vous rencontrer.
B.A.BA Entretien
Apprenez à préparer votre prochain entretien.
Informations sur le marché du travail
Accédez aux informations et statistiques sur ce métier.
Simulateurs d'aides et allocations en cas de reprise d'emploi
Estimez vos futures ressources financières sur les 6 prochains mois.
- Voir plus de services (Emploi store)