Dans le cadre de ses projets Big Data internes, notre client recherche un Consultant DataOps & Administrateur Hadoop confirmé, intégré à léquipe BDP (Big Data Platform). Le consultant interviendra sur le déploiement, lindustrialisation, lexploitation et le maintien en condition opérationnelle de clusters Big Data personnalisés, basés sur la TOSIT Data Platform (TDP), au service des projets data et métiers. Rôle et responsabilités1. Déploiement & industrialisation des clusters Big Data * Déploiement automatisé de clusters via pipelines Jenkins * Installation et configuration des composants Hadoop via Ansible * Adaptation des architectures selon les besoins projets (sécurité, performance, capacité) * Contribution aux pratiques CI/CD et Infrastructure as Code * Déploiement et administration du TDP Manager * Mise en place de Hue pour les environnements Datalab 2. Administration avancée de la stack Hadoop / TDP Le consultant est responsable de linstallation, la configuration et lexploitation de : * Sécurité & identit és : o OpenLDAP o Kerberos o Ranger (politiques de sécurité) * Stockage & calcul distribué : o HDFS (baie Huawei) o Hadoop (YARN, services core) * Traitement & acc ès aux données : o Spark o Hive * Services transverses : o ZooKeeper o PostgreSQL Responsabilités associées : * Gestion des dépendances inter-services * Cohérence des versions * Optimisation des performances et de la stabilité * Résolution des incidents complexes 3. Provisionnement & automatisation des environnements * Provisionnement de VM sous VMware * Préparation des prérequis systèmes (OS, réseau, stockage) * Automatisation via Ansible et scripts Bash * Gestion des environnements DEV / RECETTE / PROD 4. Observabilité, supervision & anticipation * Mise en œuvre et maintien de la stack dobservabilité : o Prometheus o Alertmanager o Loki / Promtail o Grafana * Définition des indicateurs de supervision * Analyse proactive des alertes * Diagnostic et résolution dincidents 5. Maintien en Condition Opérationnelle (MCO) * Administration quotidienne des clusters Hadoop * Support aux équipes projets et utilisateurs Datalab * Gestion des incidents, demandes dévolution et correctifs * Montées de version * Suivi de capacité (CPU, RAM, stockage) * Rédaction et mise à jour de la documentation technique Interaction & posture attendue * Participation active aux rituels déquipe * Coordination avec : o Équipes infrastructure o Équipes projets data / métiers o Référents sécurité * Capacité à accompagner et conseiller les équipes dans lusage de la plateforme * Forte capacité de communication transverse Compétences clés attenduesTechniques * Expertise Hadoop / Big Data on-prem * Solide expérience DataOps / DevOps * Maîtrise de : o Jenkins, GitLab CI/CD, SonarQube o Ansible, Bash o VMware, Docker o Stack dobservabilité (Prometheus, Grafana, Loki) Méthodologiques & soft skills : * Rigueur et sens de la qualité * Forte sensibilité aux enjeux de sécurité * Capacité danticipation (supervision, performance, capacité) * Autonomie et esprit déquipe * Aisance dans des environnements complexes et critiques Points de vigilance * Forte interdépendance des composants Hadoop * Exigences élevées en matière de sécurité (Kerberos, Ranger) * Enjeux de performance et de disponibilité * Nécessité dune coordination transverse permanente Profil candidat: Rôle et responsabilités1. Déploiement & industrialisation des clusters Big Data * Déploiement automatisé de clusters via pipelines Jenkins * Installation et configuration des composants Hadoop via Ansible * Adaptation des architectures selon les besoins projets (sécurité, performance, capacité) * Contribution aux pratiques CI/CD et Infrastructure as Code * Déploiement et administration du TDP Manager * Mise en place de Hue pour les environnements Datalab 2. Administration avancée de la stack Hadoop / TDP Le consultant est responsable de linstallation, la configuration et lexploit