Data Engineer Snowflake H/F TLTI

Le besoin

📍 Localisation : Issy-les-Moulineaux (92)
🏠 Télétravail : 2 jours/semaine, dont le vendredi
🏢 Présentiel : 3 jours/semaine obligatoires
📅 Démarrage : ASAP
⏳ Durée : Prestation longue durée
👥 Nombre de profils recherchés : 2
💼 Type de contrat : Freelance / prestation

🔎 Contexte

Notre client, un grand groupe, fait évoluer son DataHub d'une architecture BI traditionnelle vers une architecture Data Lakehouse.

L'objectif est notamment de migrer les flux existants, mettre en place de nouvelles zones data et progressivement décommissionner Talend.

L'architecture cible s'appuie principalement sur Snowflake et AWS.

Dans ce contexte, nous recherchons 2 Data Engineers Snowflake pour renforcer l'équipe technique.

Les consultants interviendront à la fois sur les projets de migration vers le Lakehouse, les évolutions du périmètre data existant ainsi que sur les sujets de Run et de production.

🎯 Vos missions

Migration Talend Snowflake

• Analyser les jobs Talend existants

• Reprendre et documenter les traitements

• Migrer les traitements ETL vers des patterns ELT natifs Snowflake

• Réécrire les jobs et réaliser les tests

• Effectuer les recettes et tests de non-régression

• Participer au décommissionnement progressif de Talend

🏗️ Data Lakehouse

• Participer à la conception et à la mise en oeuvre de l'architecture Data Lakehouse

• Travailler sur les différentes zones : Landing, Lakehouse, Data Products

• Concevoir et développer des pipelines de données

• Mettre en oeuvre les patterns ELT

❄️ Snowflake

• Développer en Snowflake SQL

• Mettre en oeuvre Snowpipe pour les flux batch et temps réel

• Utiliser Snowpark / Python

• Participer à la gestion des rôles et des accès avec RBAC

• Mettre en oeuvre le tagging et le masking

• Superviser et optimiser les traitements Snowflake

• Participer à l'optimisation des coûts

☁️ Industrialisation & Run

• Automatiser les traitements et les déploiements

• Participer à la mise en place et à l'amélioration de la CI/CD Data

• Utiliser Terraform

• Analyser et résoudre les incidents de production

• Réaliser les analyses de cause racine

• Mettre en place des corrections durables

• Assurer le suivi et la documentation des incidents

📊 Projets & évolutions

• Participer au cadrage des besoins

• Réaliser les chiffrages

• Concevoir et développer les évolutions

• Réaliser les tests et la recette

• Participer aux mises en production

• Assurer la documentation des développements

🛠️ Compétences recherchées

Obligatoires

• Snowflake : expertise confirmée

• SQL avancé

• Snowpipe

• Snowpark

• Python

• RBAC / sécurité Snowflake

• Terraform

• Talend ou un ETL équivalent

• Expérience de migration ETL ELT

• Expérience en maintenance évolutive et corrective

⭐ Les compétences suivantes sont un plus

• AWS, notamment Lambda et services serverless

• Power BI

• Architecture Data Lakehouse

• Architecture Data Mesh

• CI/CD Data

• Optimisation des coûts Snowflake

📦 Livrables

Le consultant pourra notamment être amené à produire :

• Inventaire et documentation des jobs Talend repris

• Pipelines Snowflake industrialisés

• Modèles Data Lakehouse documentés

• Contribution à la stratégie de migration et de décommissionnement de Talend

• Développements sur les projets et demandes évolutives

• Documentation et suivi des incidents de production