Fiche métier Data engineer

Métier

Cet emploi est :

Emploi cadre

Cet emploi participe à :

Transition numérique

Tout savoir sur le métier Data engineer

Les missions principales

Collecte et analyse des volumes importants de données, tout en garantissant la sécurité de celles-ci.
Développe des solutions de traitement et d'industrialisation de ces données en mobilisant son expertise technique (technologies du Big Data, langages, ..) en lien avec les équipes qui les analysent et les équipes métier.
Déploie et maintient la solution sur son cycle de vie.

Secteurs d’activité

Comment y accéder

Ce métier est accessible avec un diplôme de niveau Bac+5 , Master 2 en informatique, en data science ou en statistique, ou école d'ingénieur. Il est également accessible avec un niveau bac + 2 et une expérience professionnelle en développement et manipulation de données.

Certifications et diplômes

Data engineer
Master mention Méthodes Informatiques Appliquées à la Gestion des Entreprises - MIAGE
Mastère Spécialisé Expert Big Data engineer

Les compétences recherchées pour le métier Data engineer

Ce qu’il faut savoir faire

Cliquez pour connaître les savoir-faire attendus pour exercer ce métier

Communication, Création, Innovation, Nouvelles technologies ( 48 %)
Recherche, Innovation
- Animer une démarche agile et innovante
- Créer, élaborer et identifier des concepts innovants
- Proposer des pistes d'amélioration des solutions
- Réaliser une veille technique ou technologique pour anticiper les évolutions
Data et Nouvelles technologies
- Déployer, intégrer un logiciel, un système d'informations, une application
- Intégrer des outils IA/Data Science
- Tester un logiciel, un système d'informations, une application
- Paramétrer un logiciel métier et l'interfacer à d'autres applicatifs
- Développer une application en lien avec une base de données
- Piloter des évolutions ou des paramétrages à apporter aux composants
- Sélectionner, assembler et intégrer des composants informatiques (progiciels, bases de données, développements spécifiques, ...)
- Vérifier la compatibilité des développements produits avec les spécifications
- Gérer une architecture technique
- Analyser, exploiter, structurer des données
- Gérer des données massives
- Gérer et maitriser des bases de données (SQL/NoSQL)
- Définir les solutions de stockage et de structuration des données
- Réaliser une analyse ou modélisation statistique de données
- Modéliser une base de données
- Enrichir une base de données
- Analyser / traiter l'information à des fins d'anticipation
Communication, Multimédia
- Rédiger le contenu d'un support de communication
- Concevoir et développer une solution digitale
- Rédiger un cahier des charges, des spécifications techniques
- Rédiger des documents d'ingénierie (rédaction des spécifications fonctionnelles et livrables techniques des solutions)
Développement économique ( 19 %)
Stratégie de développement
- Mobiliser une vision stratégique et d'anticipation
- Mettre en place des mesures d'optimisation de l'activité d'une production
- Mettre en place des solutions d'amélioration de la performance
- Piloter le déploiement et l'intégration d'outils d'optimisation au sein des processus métiers
- Concevoir et gérer un projet
- Planifier les étapes d'un projet
- Piloter le déploiement de solutions innovantes
- Superviser et coordonner les réalisations, études ou développements informatiques (collaborateurs, sous-traitants)
Relation client
- Recueillir et analyser les besoins client
- Apporter une assistance technique aux équipes
Coopération, Organisation et Développement de ses compétences ( 19 %)
Organisation
- Se conformer aux normes et à la réglementation
- Expliquer et faire respecter les règles et procédures
Communication
- Collaborer dans un groupe pour réaliser un projet
- Utiliser l'anglais en contexte professionnel
- Communiquer à l'écrit de façon appropriée
- Convaincre en argumentant avec un ou plusieurs interlocuteurs (interne et externe)
- Rendre compte de son activité
- Promouvoir une proposition, un projet
Développement des compétences
- Actualiser régulièrement ses connaissances
- Identifier ses axes de progrès
Production, Construction, Qualité, Logistique ( 10 %)
Maintenance, Réparation
- Assurer la maintenance préventive et les améliorations des infrastructures numériques
- Piloter des opérations de tests informatiques
Prévention des risques
- Anticiper les risques de cybersécurité
- Déterminer des mesures correctives
- Surveiller le fonctionnement d'applicatifs et logiciels
Management, Social, Soin ( 2 %)
Conseil, Transmission
- Accompagner l'appropriation d'un outil par ses utilisateurs
Pilotage, Gestion, Cadre réglementaire ( 2 %)
Pilotage et maîtrise des coûts
- Anticiper des coûts

Les savoir-être professionnels

Cliquez pour connaître les savoir-être professionnels recommandés pour exercer ce métier

Savoir-être professionnels

Ce qu'il faut savoir

Cliquez pour connaître les savoirs utiles à l’exercice de ce métier

Domaines d'expertise
- Algorithmique
- Anglais technique
- Architecture web
- Cloud computing
- Intelligence artificielle
- Business Intelligence (BI) / Informatique décisionnelle
- Cryptologie
- Langages de programmation informatique
- Python
- Java
- Technologies SPARK (Framework)
- Technologies HADOOP
- Domaine informatique client-serveur
- Systèmes d'exploitation informatique
- Système d'exploitation Linux
- Génie logiciel
- Informatique de gestion
- Informatique scientifique et technique
- Programmation logicielle
- Maîtrise d’un outil de gestion de flux (Kafka, Flink…)
Normes et procédés
- Gestion des risques (Risk Management)
- Méthodes d'analyse (systémique, fonctionnelle, de risques, ...)
- Modélisation informatique

Les contextes de travail pour le métier Data engineer

Conditions de travail et risques professionnels

Possibilité de télétravail
Travail en mode projet

Horaires et durée du travail

Travail selon un rythme irrégulier et des pics d'activité

Statut d’emploi

Salarié secteur privé (CDI, CDD)
Salarié secteur public
Travailleur indépendant

Pour aller plus loin dans votre projet pour le métier Data engineer

Choisissez votre territoire pour avoir des informations personnalisées :

Le marché du travail dans votre territoire

Accédez à plus de chiffres clés sur Data emploi

Les services pour vous accompagner

Les offres dans votre territoire

Trouvez des entreprises à fort potentiel d'embauche

pour envoyer vos candidatures spontanées

Découvrir ces entreprises

Les métiers proches du métier

Être accompagné vers le métier

Que vous soyez inscrit ou non à France Travail, vous pouvez être accompagné. Nous sommes là pour vous.

Vous êtes inscrit à France Travail ?

Prenez contact avec un conseiller

Vous n'êtes pas inscrit à France Travail ?

Trouvez un conseiller en fonction de votre situation

Fiche métier Data engineer

Caractéristiques de l’emploi

Tout savoir sur le métier Data engineer

Les missions principales

Secteurs d’activité

Comment y accéder

Certifications et diplômes

Les compétences recherchées pour le métier Data engineer

Ce qu’il faut savoir faire

Communication, Création, Innovation, Nouvelles technologies ( 48 %)

Recherche, Innovation

Data et Nouvelles technologies

Communication, Multimédia

Développement économique ( 19 %)

Stratégie de développement

Relation client

Coopération, Organisation et Développement de ses compétences ( 19 %)

Organisation

Communication

Développement des compétences

Production, Construction, Qualité, Logistique ( 10 %)

Maintenance, Réparation

Prévention des risques

Management, Social, Soin ( 2 %)

Conseil, Transmission

Pilotage, Gestion, Cadre réglementaire ( 2 %)

Pilotage et maîtrise des coûts