Data Engineer - Azure Databricks H/F

Consilia-Data

Vous intervenez au sein de l'équipe Data dans la mise en oeuvre et l'évolution des solutions data de l'entreprise, en étroite collaboration avec les équipes Produit, Architecture et Métiers. Vous analysez et challengez les besoins, proposez des solutions techniques robustes et pilotez la réalisation des flux de données de bout en bout.

Vous assurez la conception, le développement et la maintenance des pipelines de données en vous appuyant sur les services cloud Microsoft Azure. Vous contribuez activement aux choix techniques, à l'industrialisation des traitements ainsi qu'à la gestion des flux temps réel et batch.

Vos responsabilités incluent :

- Le développement de pipelines d'intégration avec Azure Data Factory,
- La transformation et l'ingestion de données complexes via Azure Databricks,
- La mise en oeuvre de traitements serverless avec Azure Functions,
- L'exploitation de Azure Stream Analytics pour la gestion des données en temps réel,
- La participation à l'optimisation des performances et à la documentation technique,
- Le respect des bonnes pratiques de développement, des standards sécurité, et des délais du planning projet.

Vous collaborez avec les Data Analysts, Data Scientists et DevOps, et vous assurez la cohérence des flux de données dans l'écosystème global.

Vous êtes titulaire d'un diplôme de niveau Bac +5 en informatique, en Data ou équivalent, et disposez d'une expérience significative (6 ans minimum) dans un environnement Big Data ou analytique, avec un focus sur la plateforme Azure.

Compétences techniques attendues :

- Maîtrise de Azure Data Factory, Azure Databricks, Azure Functions, Azure Stream Analytics,
- Bon niveau en T-SQL, Python ou Scala,
- Connaissance des architectures cloud (PaaS, serverless, gestion des identités et accès),
- Expérience en intégration et transformation de données à forte volumétrie,
- Compréhension des enjeux liés à la qualité, la traçabilité et la gouvernance des données.

Des atouts pour votre profil :

- Connaissances des pratiques DevOps sur Azure DevOps,
- Bon niveau d'anglais technique,
- Capacité à documenter clairement les solutions, à travailler en mode agile et à respecter les engagements projet.

Vous êtes rigoureux(se), autonome, force de proposition et appréciez le travail en équipe. Vous avez le sens de l'analyse, de la méthode, et êtes orienté(e) résultats.

Consilia-Data est une ESN (Entreprise de Services du Numérique) basée dans le 17e arrondissement de Paris. Nous accompagnons nos clients dans leurs projets data, de la conception à la mise en production : data engineering, data science, BI et pilotage de la donnée. Notre équipe intervient auprès d'entreprises de tous secteurs, avec une exigence forte de qualité et de proximité client. Chez Consilia-Data, nous plaçons l'humain au coeur de notre développement, montée en compétences, accompagnement personnalisé et esprit d'équipe font partie de notre ADN. Rejoindre Consilia-Data, c'est intégrer une structure à taille humaine où chaque collaborateur peut évoluer et s'épanouir sur des projets techniques stimulants.