Les missions du poste

Contexte du poste

Dans le cadre de projets data à fort volume et à forte criticité, agap2IT recherche un Data Engineer H/F spécialisé Airflow pour intervenir chez des clients grands comptes, au sein d'environnements data industrialisés et internationaux.

Missions principales

- Concevoir, développer et maintenir des pipelines de données avec Apache Airflow
- Orchestrer des flux batch et event-driven à grande échelle
- Garantir la qualité, la fiabilité et la performance des traitements data
- Intégrer des données provenant de sources multiples (SI internes, APIs, fichiers)
- Mettre en oeuvre les bonnes pratiques de monitoring, logging et reprise sur incident
- Optimiser les temps de traitement et la gestion des dépendances
- Collaborer avec les équipes Data, Dev, Ops et Métiers
- Documenter les pipelines et participer à l'amélioration continue de la plateforme data

Environnement technique

Orchestration : Apache Airflow (Docker / Kubernetes)

Langages : Python, SQL

Data : Data Lake, Data Warehouse

Cloud : AWS

Traitements : Spark / PySpark

CI/CD : GitLab CI / Jenkins

Systèmes : Linux

Monitoring : Airflow UI, Prometheus, Grafana

Le profil recherché

Profil recherché

Formation Bac +5 (école d'ingénieur, université ou équivalent)

Minimum 5 ans d'expérience en Data Engineering

Expertise confirmée sur Apache Airflow

Très bonne maîtrise de Python et du SQL

Expérience sur des environnements Cloud et data à grande échelle

Sensibilité aux enjeux de qualité, performance et industrialisation

Autonomie, rigueur et esprit d'équipe

Anglais professionnel requis

Pour agap2, tous les talents comptent ! Nous traitons les candidatures dans l'égalité des chances dans un objectif d'inclusion et de diversité de nos collaborateurs. Si vous êtes en situation de handicap, n'hésitez pas à nous poser vos questions et à postuler.

Infos complémentaires

Implantée au coeur de la Provence, l'agence d'Aix-en-Provence s'inscrit dans un territoire à fort potentiel industriel et technologique. Proche des pôles d'innovation de la région Sud, elle accompagne les dynamiques locales autour de la mobilité, de l'énergie et des infrastructures.