Data Engineer - Platform Streaming & Kafka Self-Service - Expérience H/F HELPLINE
- Marcq-en-Barœul - 59
- CDI
- Bac +2
- Bac +3, Bac +4
- Bac +5
- Secteur informatique • ESN
- Exp. 7 ans min.
Les compétences pour ce job
- KAFKA
Les missions du poste
HELPLINE Lille recherche son nouveau talent sur la fonction de Data Engineer H/F, positionné(e) directement au coeur des équipes ingénierie chez notre client grand compte sur la métropole lilloise.
Au sein de l'équipe Data Engineering (composée de plusieurs Développeurs, d'un PO et d'un EM), votre mission principale consistera à concevoir, bâtir et automatiser une plateforme de streaming de données basée sur Kafka, utilisable en self-service par les différentes équipes de développement.
L'objectif majeur est de proposer une alternative moderne et événementielle aux architectures ETL historiques du groupe, afin d'accélérer la transition vers une Data Platform cible et de renforcer l'autonomie des équipes Software.
Le profil recherché
Ce que nous allons accomplir ensemble :
- Architecture & Self-Service : Mettre en place la configuration as-code de la plateforme Kafka et de son écosystème. Déployer des outils Self-Service (notamment via KRO - Kafka Resource Operator) pour permettre aux équipes de provisionner leurs ressources Kafka de manière autonome.
- CI/CD & Automation : Concevoir et maintenir les pipelines de CI/CD sous GitLab CI et appliquer une approche GitOps / IaC pour l'automatisation des ressources.
- Documentation & Support : Rédiger la documentation, les guides de bonnes pratiques utilisateurs et les procédures d'exploitation, tout en assurant le support technique du quotidien auprès des équipes consommatrices.
- Projets structurants : Participer activement aux étapes de conception, d'évolution et d'extension de la nouvelle Data Platform globale.
Organisation du travail : Rythme de travail en hybride (3 jours fixes sur site / 2 jours en télétravail).
Le poste est soumis à des astreintes.
Infos complémentaires
Ce poste est fait pour vous si :
🛠️ Vos compétences incontournables (Must Have) :
- Apache Kafka & Kafka Connect : Excellente maîtrise de l'architecture Kafka et de la gestion des connecteurs (Source / Sink).
- Conteneurisation & Orchestration : Expérience forte dans le déploiement d'architectures distribuées sous Kubernetes & Docker.
🌟 Ce qui fera la différence (Nice to Have) :
- Expérience dans la construction d'une Data Platform (Data Lake, Data Mesh, architectures événementielles, Iceberg, Snowflake).
- Connaissance de KRO (Kafka Resource Operator) et implémentation de logique self-service avec des opérateurs Kubernetes.
- Sensibilité aux enjeux FinOps et à l'optimisation des coûts d'infrastructure Cloud.
- Esprit d'équipe, rigueur, autonomie et appétence pour le partage de connaissances.
- CI/CD & IaC : Maîtrise de GitLab CI/CD et pratique des méthodologies GitOps / Infrastructure as Code.
- Observabilité : Maîtrise des outils de monitoring (Prometheus, Datadog, OpenTelemetry).
Tous nos postes se conjuguent au féminin et au masculin et sont bien évidemment ouverts aux personnes en situation de handicap.
HELPLINE en images
Publiée le 20/07/2026 - Réf : REF4275L