Ingénieur Data H/F CHARLI GROUP

Le contexte:

L'un des objectifs majeurs du plan de transformation DATA du groupe est de développer les applications DATA qui permettent à nos métiers business (pilotage, marketing, commerce, ...) d'être autonomes dans l'analyse des données et des KPI

Dans ce cadre, le groupe a déployé les outils : AWS, Gitlab, Terraform, DBT, Snowflake, Braze, AI, Python, Scala, Spark, Python, POWERBI, .etc.

Votre rôle sera de :
- Faire des développements avanacés en Scala, Spark, Terraform, SQL et Python
- Concevoir, développer, maintenir et déployer des pipelines de données scalables et performants.
- Mettre en place des architectures Big Data sur AWS (S3, EMR, Lambda, Kinesis, Batch...), Snowflake
- Développer en Scala et exploiter Apache Spark pour le traitement massif des données.
- Automatiser les workflows avec Apache Airflow et DBT pour orchestrer les pipelines.
- Concevoir et exposer des APIs customer-facing performantes
- Optimiser les performances et garantir la scalabilité du système pour gérer un grand volume d'utilisateurs.
- Travailler en collaboration avec les équipes Data Science, Produit et DevOps pour assurer une intégration fluide.