Data Engineer H/F Nyou

Contexte et objectif de la mission

La mission consiste à mettre en place de nouveaux produits accompagnant la transition technologique de la plateforme et des pratiques associées. Elle inclut également l'accompagnement de l'équipe dans la montée en compétence sur les outils du socle, notamment DBT, Kafka, Kafka Connect et Trino.

Responsabilités principales

- Concevoir, implémenter et documenter des pipelines d'ingestion et de transformation (DBT, Kafka Connect, Trino).
- Mettre en place des modèles de données optimisés et conformes aux standards du socle.
- Participer à la migration et à l'optimisation des traitements depuis Cloudera/Spark vers les nouvelles technologies (Kafka / Trino / Iceberg).
- Intégrer les développements dans la chaîne CI/CD, en lien avec les pratiques de déploiement du socle.
- Participer à la gestion des habilitations et du contrôle des accès, en cohérence avec les principes de sécurité et la conformité RGPD.
- Contribuer à la mise en place d'outils d'observabilité (logs, monitoring, audit des accès, performance des jobs).
- Accompagner les membres de l'équipe dans la prise en main des outils DBT et Kafka.
- Partager les bonnes pratiques de développement, de testing et de gestion du code (revues, documentation, mentoring).
- Être force de proposition sur l'amélioration continue du socle et des workflows de développement.
- Collaborer étroitement avec le Tech Lead, les Product Owners et les Data Stewards pour assurer la cohérence des modèles et des processus.
- Participer activement aux rituels agiles (daily, sprint planning, review, rétrospective).