Data Engineer Gcp H/F Utigroup

Directement intégré à une équipe de la Direction Data de notre client, vous travaillerez en collaboration avec les autres équipes de la Data, au coeur de la plateforme Data. Cette équipe est composée d'un product owner, d'un data steward et d'un data ingénieur.

Vos missions :

- Participer activement aux différentes phases de conception, de planification et de réalisation des tâches avec l'équipe
- Construire et maintenir des pipelines data robustes et scalables
- Accompagner les membres de l'équipe dans l'exploitation et le requêtage des données
- Organiser et structurer le stockage des données
- Mettre en place et maintenir des infrastructures scalables capable de répondre aux besoins et à l'accroissement rapide du volume de données
- Participer aux initiatives de gouvernance des données en assurant la qualité, la fiabilité et l'intégrité des données
- Construire et maintenir les workflows de la CI/CD
- Partager avec les autres data ingénieurs pour appliquer les bonnes pratiques en vigueur
- Assurer l'évolutivité, la sécurité, la stabilité des environnements
- Participer aux différentes instances des data ingénieurs
- Contribuer et veiller à la mise à jour de la documentation
- Faire de la veille technologique active dans le domaine

Livrables attendus :

- Déployer les datasets normés sur un ou plusieurs des data domain suivants : Utilisateurs, Comportements et Référentiels
- Accompagner les utilisateurs dans leurs usages
- Mettre en place le contrôle qualité sur ces datasets

Stack technique est principalement constitué de Python, Spark, SQL, dbt, BigQuery, Airflow pour l'orchestration des traitements et Terraform ainsi que Terragrunt pour l'industrialisation. La stack inclut aussi d'autres services de la Google Cloud Platform.