Data Engineer H/F Autajon

1. Ingestion et Intégration des Données (Data Ingestion)

- Concevoir et implémenter des pipelines d'ingestion robustes pour collecter les données depuis un contexte multi ERP (architectures et modèles de données hétérogènes).
- Assurer l'alimentation du Data Lake et Data Warehouse
- Gérer les problématiques de qualité de données et de réconciliation inter-systèmes.

2. Développement ETL & Transformation

- Développer et maintenir les flux de transformation de données (ETL/ELT) en utilisant les outils de l'écosystème Data Factory, Notebooks Spark/Python, T-SQL).
- Optimiser les performances des traitements pour garantir la fraîcheur des données.
- Structurer les modèles de données (Gold layer) pour faciliter leur consommation.

3. Exposition des Données

- BI : Préparer les jeux de données certifiés et les modèles sémantiques pour notre solution de BI. Collaborer avec les Data Analysts pour optimiser les performances DAX.
- Pour les Applications : Concevoir et développer des API sécurisées permettant d'exposer la donnée transformée aux applications tierces.

4. Architecture et Veille

- Être garant des bonnes pratiques de développement et d'architecture sur la plateforme data.
- Assurer une veille technologique active sur les évolutions de la stack Data .