Data Engineer - Azure Databricks H/F

Consilia-Data

Vous intervenez au sein de l'équipe Data dans la mise en oeuvre et l'évolution des solutions data de l'entreprise, en étroite collaboration avec les équipes Produit, Architecture et Métiers. Vous analysez et challengez les besoins, proposez des solutions techniques robustes et pilotez la réalisation des flux de données de bout en bout.

Vous assurez la conception, le développement et la maintenance des pipelines de données en vous appuyant sur les services cloud Microsoft Azure. Vous contribuez activement aux choix techniques, à l'industrialisation des traitements ainsi qu'à la gestion des flux temps réel et batch.

Vos responsabilités incluent :

- Le développement de pipelines d'intégration avec Azure Data Factory,
- La transformation et l'ingestion de données complexes via Azure Databricks,
- La mise en oeuvre de traitements serverless avec Azure Functions,
- L'exploitation de Azure Stream Analytics pour la gestion des données en temps réel,
- La participation à l'optimisation des performances et à la documentation technique,
- Le respect des bonnes pratiques de développement, des standards sécurité, et des délais du planning projet.

Vous collaborez avec les Data Analysts, Data Scientists et DevOps, et vous assurez la cohérence des flux de données dans l'écosystème global.

Vous êtes titulaire d'un diplôme de niveau Bac +5 en informatique, en Data ou équivalent, et disposez d'une expérience significative (6 ans minimum) dans un environnement Big Data ou analytique, avec un focus sur la plateforme Azure.

Compétences techniques attendues :

- Maîtrise de Azure Data Factory, Azure Databricks, Azure Functions, Azure Stream Analytics,
- Bon niveau en T-SQL, Python ou Scala,
- Connaissance des architectures cloud (PaaS, serverless, gestion des identités et accès),
- Expérience en intégration et transformation de données à forte volumétrie,
- Compréhension des enjeux liés à la qualité, la traçabilité et la gouvernance des données.

Des atouts pour votre profil :

- Connaissances des pratiques DevOps sur Azure DevOps,
- Bon niveau d'anglais technique,
- Capacité à documenter clairement les solutions, à travailler en mode agile et à respecter les engagements projet.

Vous êtes rigoureux(se), autonome, force de proposition et appréciez le travail en équipe. Vous avez le sens de l'analyse, de la méthode, et êtes orienté(e) résultats.

Consilia-data une société de conseil spécialisée en Business Intelligence & Data management en pleine croissance, elle regroupe des ingénieurs hautement qualifiés afin de répondre aux besoins et aux attentes de ses clients.