Senior Data Engineer - Data Factory F - M - D H/F Decathlon Technology

Notre Team Data Observability recherche un·e Senior Data Engineer basé·e à Lille ou Paris.

Chez Decathlon, nous croyons au pouvoir du sport pour unir et inspirer. Notre mission : rendre le sport accessible au plus grand nombre, partout dans le monde. Pour y parvenir, la data est au coeur de notre stratégie, elle guide chaque décision, de la conception du produit à l'expérience client. Notre équipe Data Observability est une brique essentielle de cette mission. Organisée autour de 3 axes clés, l'équipe Data Observability est chargée d'exposer le patrimoine de donnée de Decathlon ainsi que sa maturité au travers du Data cockpit. Nous mettons également à disposition les données core essentielles de lineage, de qualité et d'usage. Nous sommes une équipe qui valorise la collaboration, la montée en compétences et l'impact concret.

TA FUTURE CONTRIBUTION

En tant que Senior Data Engineer au sein de l'équipe Data Observability, tu joueras un rôle clé dans la création et l'optimisation de modèles de données pour nos équipes data platform, analytiques métier et pays. Notre mission est de créer la plateforme d'observabilité des données au sein de Decathlon (usage, métriques de qualité de donnée, lineage). Nous travaillons sur les tables et les modèles sémantiques qui permettent d'incarner cette vision.

Tes responsabilités comprendront :

- Modélisation et développement des modèles : Concevoir, développer et industrialiser des modèles de données complexes pour permettre l'analyse des usages, de la qualité et de la maturité de notre patrimoine de donnée. Tu assureras la résilience et l'excellence opérationnelle de ces pipelines.
- Data Governance automatisé : Tu prendras part à la mise en place de cette nouvelle approche au travers des data contract et du data cockpit.
- Compréhension des besoins fonctionnels : Proactivité dans l'analyse du besoin et la compréhension du quotidien des utilisateurs qu'on accompagne et de leur stakeholders.
- Support et accompagnement : Agir en tant qu'expert pour guider les équipes data dans l'utilisation correcte et efficace de nos produits d'observabilité
- Promotion des bonnes pratiques : Contribuer activement à l'amélioration continue de nos méthodes de travail (mob programming, TDD, documentation robuste...) pour élever les standards techniques de l'équipe.
- Excellence opérationnelle : Mettre en oeuvre des solutions de monitoring et d'automatisation pour réduire considérablement la charge de travail manuelle et améliorer l'efficacité globale de l'équipe.

L'équipe est composée de :

- 1 Product Manager
- 4 Data Engineers

STACK TECHNIQUE

- Amazon Web Services S3, Glue, EMR
- Databricks, Unity Catalog
- Apache Spark (PySpark)
- Ordonnancement avec Airflow (Python)
- Kafka
- Open Source framework : Great expectations, Open Lineage
- Github

CE QUE TU APPORTES

Nous recherchons un(e) Senior Data Engineer avec une appétence pour comprendre les processus métiers, tourné(e) vers nos utilisateurs, en parallèle de solides compétences techniques.

Compétences techniques :

- Maîtrise avancée du SQL pour requêter, manipuler et optimiser des datasets complexes.
- Une Maîtrise avancée de développement en Python (Pyspark) et/ou dans d'autres langages de programmation
- Expérience pratique avec les plateformes de données basées sur le cloud (une expérience pratique avec Databricks, EMR et Airflow est un atout significatif.)
- Une bonne compréhension du cycle de vie des données et des principes de modélisation dimensionnelle (Kimball, OBT, etc) ainsi que des concepts de data lineage, data governance, data contract.
- Une connaissance approfondie des systèmes de contrôle de version et d'intégration continue (Git/Github).

Compétences interpersonnelles et de collaboration :

- Excellentes compé