Senior Data & Analytics Engineer - Databricks - Python - R H/F Visian

Profil recherché

Expérience professionnelle

• Expérience généralement supérieure ou égale à 7 ans en ingénierie logicielle ou en ingénierie des données.

• Expérience confirmée sur Databricks et Apache Spark.

• Expérience significative dans le développement, l'optimisation et l'industrialisation de traitements de données en production.

• Expérience dans l'accompagnement technique de développeurs Python et R.

• Une expérience dans des environnements analytiques réglementés constitue un atout.

• Une expérience d'Azure Databricks et des environnements de gouvernance des données est appréciée.

Compétences techniques requises

Databricks et ingénierie des données

• Maîtrise d'Azure Databricks, Delta Lake et Unity Catalog.

• Bonne maîtrise de SQL et des Jobs/Workflows Databricks.

• Solides connaissances des processus ETL/ELT et des architectures de traitement de données.

• Maîtrise de l'optimisation des performances Apache Spark.

Python et PySpark

• Expertise en Python et PySpark.

• Maîtrise des pratiques de tests, de débogage et de revue de code.

• Capacité à développer des solutions robustes, maintenables et adaptées à la production.

R et analyse de données

• Bonne maîtrise de R et de son écosystème, notamment tidyverse, data.table et sparklyr.

• Capacité à analyser, maintenir et optimiser des traitements existants en R.

Industrialisation et DevOps

• Maîtrise de Git et d'Azure DevOps.

• Bonne connaissance des pratiques CI/CD.

• Capacité à automatiser les tests et les déploiements et à appliquer des standards de développement.

Qualité et gouvernance des données

• Connaissance des principes de qualité, de traçabilité (data lineage) et de gouvernance des données.

• Capacité à fiabiliser les pipelines et à garantir la cohérence des traitements analytiques.

Compétences complémentaires appréciées

• MLflow pour le suivi du cycle de vie des modèles de machine learning.

• Power BI pour la visualisation et la restitution des données.

• Azure Storage pour le stockage des données.

• Microsoft Entra ID et Azure Key Vault pour la gestion des identités, des accès et des secrets.

Qualités et compétences transverses

• Capacité à accompagner techniquement les équipes et à transmettre les connaissances.

• Esprit d'analyse et aptitude à résoudre des problématiques techniques complexes.

• Capacité à justifier les choix d'architecture et les décisions de migration sur la base d'éléments factuels.

• Rigueur et sensibilité aux enjeux de qualité, de sécurité, de performance et de maintenabilité.

• Autonomie, esprit d'équipe et orientation vers des solutions fiables et industrialisables.

Taux journalier :550.css-11k7fwb{display:inline-block;white-space:nowrap;vertical-align:middle;-webkit-padding-start:var(--chakra-space-1-5);padding-inline-start:var(--chakra-space-1-5);-webkit-padding-end:var(--chakra-space-1-5);padding-inline-end:var(--chakra-space-1-5);text-transform:none;font-size:var(--chakra-fontSizes-xs);border-radius:var(--chakra-radii-md);font-weight:var(--chakra-fontWeights-semibold);background:var(--chakra-colors-success-200);color:var(--chakra-colors-success-700);box-shadow:var(--badge-shadow);padding:4px 6px;--badge-bg:var(--chakra-colors-success-100);--badge-color:colors.success.800;}.chakra-ui-dark .css-11k7fwb:not([data-theme]),[data-theme=dark] .css-11k7fwb:not([data-theme]),.css-11k7fwb[data-theme=dark]{--badge-bg:rgba(226, 243, 232, 0.16);--badge-color:var(--chakra-colors-success-200);}Cette offre est à 0% de commission .css-74lrwu{width:1em;height:1em;line-height:1em;-webkit-flex-shrink:0;-ms-flex-negative:0;flex-shrink:0;color:currentColor;font-size:16px;display:-webkit-box;display:-webkit-flex;display:-ms-flexbox;display:flex;-webkit-transition:.1s ease-in-out color;transition:.1s ease-in-out color;}.css-74lrwu *{-webkit-transition:.1s ease-in-out fill;transition:.1s ease-in-out fill;fill:var(--chakra-colors-rythm-600);}