Senior Data Engineer - Palantir Foundry & Aws H/F Groupe Créative
- Toulouse - 31
- CDI
- Bac +5
- Secteur informatique • ESN
- Exp. 4 à 8 ans
À noter sur ce job
Vous avez ces compétences ? Cliquez dessus pour les ajouter rapidement à votre profil !
Les missions du poste
Contexte
Dans le cadre d'un programme data stratégique pour un grand compte industriel international, nous recherchons un(e) Senior Data Engineer pour concevoir, industrialiser et maintenir des pipelines de données de bout en bout entre un environnement cloud AWS et une plateforme analytique basée sur Palantir Foundry.
Le poste s'inscrit dans une équipe produit data (data engineers, data scientists, business analysts, product owner) travaillant en mode agile sur des cas d'usage opérationnels à fort volume : données de production, de maintenance, de capteurs (IoT) et de supply chain.
Missions principales
- Concevoir et développer des pipelines d'ingestion et de transformation de données (batch et quasi temps réel) depuis AWS et des systèmes sources (ERP, bases relationnelles, API, fichiers, flux) vers Palantir Foundry.
- Développer des transformations en PySpark / Python / SQL dans les Code Repositories Foundry et via Pipeline Builder, en privilégiant les builds incrémentaux.
- Modéliser et maintenir l'Ontologie Foundry (object types, link types, actions, propriétés) pour exposer des données fiables aux applications métier.
- Mettre en place les connexions sources via Data Connection (agents, connecteurs S3, JDBC, REST) et les échanges bidirectionnels Foundry ↔ AWS.
- Garantir la qualité et la fiabilité des données : data expectations, health checks, monitoring des schedules, alerting, gestion des incidents.
- Optimiser la performance et les coûts des traitements Spark (partitionnement, gestion du skew, profils de calcul).
- Industrialiser les déploiements : branches et revues de code, CI/CD, tests unitaires et de données, Infrastructure as Code côté AWS.
- Appliquer les règles de sécurité et de gouvernance : gestion des accès, markings, lignage des données, conformité RGPD.
- Documenter les pipelines et accompagner les équipes métier et les profils plus juniors (revues de code, bonnes pratiques).
Le profil recherché
- Bac +5 (école d'ingénieur ou université) en informatique, data ou équivalent.
- 5 ans minimum d'expérience en data engineering, dont au moins 2 ans sur Palantir Foundry en contexte de production.
- Solide expérience sur AWS (idéalement certifié AWS Data Engineer - Associate ou Solutions Architect).
- Maîtrise de Spark et de l'optimisation de traitements sur de gros volumes.
- Bonne compréhension de la modélisation de données (dimensionnelle, orientée objet / ontologie).
- Expérience des pratiques DevOps / DataOps : tests, CI/CD, monitoring.
- Anglais professionnel courant (équipes et documentation internationales).
Atouts appréciés
- Expérience sur des données industrielles : maintenance, fiabilité, IoT / capteurs, supply chain, qualité.
- Certification Palantir Foundry (Data Engineer / Application Developer).
- Expérience de flux streaming et d'architectures event-driven.
- Connaissance de Databricks ou Snowflake (contextes multi-plateformes).
- Habitude des environnements soumis à de fortes contraintes de sécurité et de confidentialité.
Savoir-être
- Autonomie, rigueur et sens de la qualité de la donnée.
- Capacité à dialoguer avec les métiers et à traduire un besoin en solution data.
- Esprit d'équipe, pédagogie et goût pour le partage de bonnes pratiques.
Groupe Créative en images
Publiée le 09/11/2026 - Réf : 4451878/30826920 SDEPFA/31T
