Présentation du poste : Nous recherchons un Data Engineer compétent et motivé pour rejoindre notre équipe. Dans ce rôle, vous serez chargé de concevoir, construire et gérer des pipelines de données et des datasets robustes au sein de la plateforme Skywise (Palantir Foundry). Vous exploiterez les Code Repositories et le Pipeline Builder de Foundry pour transformer des données brutes en actifs de données de haute qualité, prêts pour la production, en utilisant la plateforme Walter pour une ingestion efficace des données. Le candidat idéal dispose de solides bases en pratiques d'ingénierie de données, d'une bonne maîtrise de SQL et de Python/PySpark, ainsi qu'un intérêt marqué ou une expérience existante dans l'écosystème Skywise. Responsabilités principales : Ingestion des données : Utiliser la plateforme Walter pour ingérer efficacement des données provenant de sources variées dans l'écosystème de données. Développement de pipelines : concevoir, construire et maintenir des pipelines de données évolutifs au sein de Skywise à l'aide de Pipeline Builder et des Code Repositories. Gestion des datasets : créer, optimiser et gérer les datasets en garantissant la qualité, l'intégrité et la performance des données, en conformité avec les processus Skywise. Rédaction de code : écrire un code propre, efficace et maintenable en Python, PySpark et SQL pour la transformation et l'agrégation des données. Intégration collaborative : utiliser TypeScript lorsque nécessaire pour les configurations avancées et les intégrations de plateforme. Bonnes pratiques de la plateforme : respecter et promouvoir les directives d'architecture Skywise et les standards de gouvernance des données. Télétravail : 2/3j semaine Profil candidat: Qualifications techniques Compétences et expérience requises Maîtrise de la plateforme : Expérience pratique de l'écosystème Skywise (Palantir Foundry). Une bonne compréhension des processus spécifiques à Skywise est très appréciée (une expérience préalable est un atout majeur). Expertise en ingestion : Expérience de la plateforme Walter pour les tâches d'ingestion de données. Langages fondamentaux : Maîtrise de SQL et de Python. Frameworks Big Data : Solide connaissance pratique de PySpark pour le traitement de données à grande échelle. Frontend/Configuration : Compréhension de base ou expérience de TypeScript dans le contexte des plateformes de données. Gestion de versions : Expérience des workflows basés sur Git et des dépôts de code. Compétences souhaitées et bonus (atouts appréciés) Expérience ou intérêt pour la création d'applications de données destinées aux utilisateurs sur la plateforme, notamment : Palantir Foundry Workshop : Création d'applications interactives et de tableaux de bord. Technologies web : Familiarité avec JavaScript et la manipulation de structures de données JSON.