Data Engineer Azure & Databricks H/F

Citech

Description du poste

Vous aurez donc les missions principales suivantes :

Configurer, structurer et mettre en oeuvre l'environnement Azure Data Lake et Databricks afin de répondre aux besoins d'ingestion et de traitement des données.

Créer des pipelines d'ingestion robustes sous Apache NiFi, intégrant des sources industrielles variées et respectant les contraintes techniques de performance, de mémoire et de réseau.

Mettre en place et maintenir un Unity Catalog garantissant la gouvernance, la traçabilité et le Data self-service.

Veiller à la stabilité de l'environnement, à la qualité du code, à la performance des traitements et à la complétude de la documentation technique.

Promouvoir la solution auprès des utilisateurs, rédiger la documentation associée et contribuer activement au partage de connaissances au sein de l'équipe Data.

Vous justifiez de minimum de 5 ans d'expérience sur des projets Data avec un environnement Cloud Azur.

Les compétences attendues sont les suivantes :

Manipulation avancée de Azure Data Lake.

Maitrise de Databricks et Apache NiFi.

Expertise des outils Python / PySpark / SQL.

Bonne connaissance de Microsoft Azure et Git / CI-CD.

Entretenir un excellent relationnel, être autonome, rigoureux et force de proposition.

Comprendre des notions scientifiques et industrielles pour favoriser l'intégration de modèles spécifiques.

Pourquoi rejoindre CITECH ?

- Une ambiance conviviale avec des afterworks réguliers !
- Des missions de longue durée
- Des formations adaptées à vos envies
- Une mobilité selon votre choix
- Un accompagnement personnalisé autour d'un café ou d'un thé
- Une mutuelle avantageuse pour vous et votre famille
- Une flexibilité sur la gestion des repas
- Un statut Cadre et une convention collective SYNTEC