Ingénieur Big Data H/F ASI

Dans un souci d'accessibilité et de clarté, les termes employés au masculin se réfèrent aussi bien au genre féminin que masculin.

Dans le cadre d'un nouveau projet data, vous interviendrez en tant que Data Ingénieur afin de participer à la conception, au développement et à l'exploitation de chaînes de traitement de données à forte volumétrie, dans un environnement technique moderne et distribué.

Au sein de votre équipe :

- Vous concevez, développez et maintenez des pipelines de données batch et streaming

- Vous développez des traitements distribués avec Spark

- Vous implémentez et optimisez des traitements SQL

- Vous participez à la mise en place et à l'exploitation de flux temps réel avec Kafka

- Vous contribuez à l'intégration et à l'utilisation d'outils d'ingestion de données (xDI)

- Vous développez et maintenez des composants en Java et Shell

- Vous participez aux phases de tests, de mise en production et de supervision

- Vous contribuez à la qualité, à la fiabilité et à la performance des traitements

- Vous travaillez en collaboration étroite avec les équipes Data et IT dans un cadre Agile

Outils techniques : Spark, SQL, Kafka, xDI, Java, Shell, Environnements Big Data et plateformes distribuées, Git et outils de versioning