Data Engineer Senior H/F Collective Works
- Massy - 91
- CDI
- Bac +5
- Services aux Entreprises
- Exp. 7 ans min.
À noter sur ce job
Vous avez ces compétences ? Cliquez dessus pour les ajouter rapidement à votre profil !
Détail du poste
Contexte
Notre client, un acteur majeur de la grande distribution, dispose d'une Digital Factory dédiée à la banque. Elle conçoit et développe les services digitaux bancaires afin de proposer une expérience fluide, personnalisée et intégrée à l'écosystème du groupe, en mettant l'accent sur l'innovation, la proximité et la simplicité.
Objet de la prestation
La prestation vise à assurer la robustesse et l'évolutivité de l'infrastructure de données afin de mettre en place un nouveau Data Mesh et de supporter les nouveaux enjeux liés à l'IA Générative. Elle s'articule autour de deux axes :
Mise en oeuvre du Data Mesh : implémentation de nouveaux pipelines permettant la mise en oeuvre d'un Data Mesh sur GCP.
Implémentation IAG : construction des socles techniques permettant l'ingestion et le traitement des données pour les modèles de langage (LLM).
Livrables
Création et alimentation d'un Data Mesh d'entreprise.
Mise en production des fondations techniques IAG.
Documentation technique des nouveaux standards de développement.
Must Have
Expertise GCP : maîtrise avancée de Dataproc, Dataflow, BigQuery, Cloud Composer (Airflow) et de l'automatisation via Terraform.
Parfaite maîtrise de l'implémentation technique d'un Data Mesh.
Nice to Have
Compétences avérées sur des plateformes de streaming de données (Apache Kafka) et des frameworks de traitement distribué (Apache Spark).
Expérience significative dans la Data et le Cloud, notamment sur Google Cloud Platform (GCP).
Très bonne maîtrise de BigQuery et du SQL avancé, avec une expérience sur des traitements de gros volumes de données.
Maîtrise de SQL pour la manipulation, l'analyse et la valorisation de données.
Connaissance approfondie de DBT (Data Build Tool) pour la gestion et l'orchestration de pipelines de données.
Expérience avec Pub/Sub pour la gestion de flux de données en temps réel.
Maîtrise des outils de CI/CD, en particulier GitLab CI/CD et Docker Compose, pour l'automatisation des workflows data.
Bonne connaissance de l'environnement Linux et des outils en ligne de commande.
Expérience solide avec les systèmes de gestion de version (Git).
Travail en méthodologie agile (Scrum), avec une capacité à collaborer efficacement dans des équipes pluridisciplinaires.
Le profil recherché
Formation Bac +5 (école d'ingénieur ou université) orientée informatique, ou expérience équivalente
Expérience de plus de 7 ans en Data Engineering Java / Scala.
Une expérience dans le secteur du retail / grande distribution constituerait un avantage
Infos complémentaires
Publiée le 18/11/2026 - Réf : 846ab93345791241be9cfbb2acf833f9