Data Engineer Databricks / dbt (H/F), Lyon

Client : grand compte. Démarrage : ASAP. Durée : jusqu'à fin décembre minimum, renouvelable. Localisation : région lyonnaise, présence sur site appréciée.

Vous intégrez une équipe data qui mène un projet stratégique de transformation des données : migration et centralisation des données de plusieurs métiers, ainsi que de leurs interfaces, dans une plateforme unifiée. Le projet a un jalon de livraison important à court terme.

Missions

• Concevoir, développer et industrialiser des pipelines de données sous Databricks (PySpark, SQL, Delta Lake).

• Développer et maintenir les modèles de transformation avec dbt : modélisation, tests, documentation.

• Structurer les données selon une architecture médaillon (bronze, silver, gold).

• Participer à la migration des données des applications métier vers la nouvelle plateforme.

• Mettre en place les bonnes pratiques DataOps : CI/CD, versioning Git, tests et qualité des données.

• Échanger avec les équipes métier et les autres intervenants pour comprendre les besoins et challenger les solutions.

• Apporter un regard critique et être force de proposition sur l'architecture et les choix techniques.

Expérience : 5 ans minimum.

• Databricks : expérience significative en production (obligatoire)

• dbt : expérience en production (obligatoire)

• Python / PySpark, SQL avancé

• Delta Lake, Unity Catalog

• CI/CD (GitLab CI, GitHub Actions ou Azure DevOps), Git

• Un plus : Terraform, Airflow, environnement Azure ou AWS

• Savoir-être : autonome, esprit critique, vision globale, bon relationnel avec des interlocuteurs techniques et non techniques.

• Atouts : expérience en environnement industriel ou grand compte; certification Databricks ou dbt; expérience de projets de migration de données.