Data Engineer Gcp - Pyspark - Dbt H/F Datamed Research
- Montigny-le-Bretonneux - 78
- CDI
- Bac +2
- Bac +3, Bac +4
- Bac +5
- Service public des collectivités territoriales
- Exp. 3 ans min.
À noter sur ce job
Vous avez ces compétences ? Cliquez dessus pour les ajouter rapidement à votre profil !
Détail du poste
Contexte de la mission :
Dans le cadre du développement et de l'évolution d'une plateforme Data Cloud, nous recherchons un Data Engineer GCP pour intervenir sur la conception, le développement et l'industrialisation de pipelines de données à grande échelle.
Missions principales :
Concevoir, développer et maintenir des pipelines de données batch et/ou streaming.
Développer les traitements de données avec Python / PySpark et SQL.
Réaliser les transformations et la modélisation des données avec dbt.
Exploiter les services GCP : BigQuery, Dataproc, Cloud Storage, Pub/Sub, Composer/Airflow.
Optimiser les traitements Spark et les performances des requêtes BigQuery.
Industrialiser et automatiser les déploiements via les processus CI/CD.
Mettre en place les contrôles de qualité, fiabilité et monitoring des données.
Participer à la conception et à l'évolution de l'architecture Data.
Collaborer avec les Data Analysts, Data Scientists et équipes métiers.
Compétences recherchées :
GCP, PySpark, Python, SQL, dbt, BigQuery, Dataproc, Cloud Storage, Airflow/Composer, Git et CI/CD.
Profil recherché :
Data Engineer confirmé disposant d'une expérience significative sur des environnements GCP et Big Data, avec une très bonne maîtrise de PySpark, SQL et dbt. Le consultant devra être autonome, à l'aise sur des problématiques d'industrialisation et capable d'intervenir sur des volumes de données importants.
Le profil recherché
Compétences: Analyser les données d'une étude, d'un projet,Concevoir et gérer un projet
Qualification: Cadre
Secteur d'activité: Conseil en systèmes et logiciels informatiques
Liste des qualités professionnelles:
Avoir l'esprit d'équipe : Capacité à travailler et à se coordonner avec les autres au sein de l'entreprise pour réaliser les objectifs fixés.
Faire preuve de rigueur et de précision : Capacité à réaliser des tâches en suivant avec exactitude les règles, les procédures, les instructions qui ont été fournies, sans réaliser d'erreur et à transmettre clairement des informations. Se montrer ponctuel et respectueux des règles de savoir-vivre usuelles.
Etre ouvert aux changements : Capacité à s'adapter à des situations variées, à réagir à l'imprévu, gérer l'incertitude pour s'ajuster à des organisations, des collectifs de travail, des habitudes, des valeurs propres à l'entreprise.
Publiée le 15/09/2026 - Réf : 213XHPP