Data Engineer

Client : Transport

Dans le cadre de l'évolution du DataHub vers une architecture Data Lakehouse, le client engage une bascule progressive depuis une architecture BI classique (ETL Talend, DWH centralisé) vers un modèle cible de type Lakehouse. Cette trajectoire inclut la migration des flux existants, la mise en place de nouvelles zones data (Landing Zone, Data Lake, Datamarts, Data Products) et le décommissionnement de Talend.

Le/la Data Engineer intervient sous la responsabilité du Responsable de l'équipe technique et en appui du Techlead sur le projet de bascule Lakehouse. Son périmètre couvre à la fois la contribution au projet de décommissionnement Talend et de nouvelle architecture Snowflake, la réalisation de projets et demandes évolutives sur le périmètre data existant, ainsi que le traitement des incidents et le support au Run.

Livrables attendus

• Inventaire et documentation des jobs Talend repris

• Pipelines Snowflake industrialisés issus de la migration Talend

• Modèles Lakehouse documentés

• Contribution à la stratégie de migration et de décommissionnement Talend

• Développements réalisés sur les projets et demandes évolutives traités

• Suivi et documentation des incidents traités (analyse de cause racine, correctifs)

Stack technique

• Snowflake (SQL, Snowpipe, Snowpark, RBAC, supervision)

• Terraform

• Talend (ou ETL équivalent)

• Python

• SQL avancé

• AWS (Lambda, services serverless) — apprécié

Compétences obligatoires :

• Snowflake : SQL, Snowpipe, Snowpark, RBAC, supervision

• Terraform

• Talend ou ETL équivalent

• SQL avancé

• Python

Compétences appréciées

• Power BI

• Expérience Data Lakehouse / Data Mesh

• AWS (Lambda, services serverless)

• 2 jours de télétravail par semaine (3j sur site)

• 3 mois renouvelable

• Démarrage : ASAP

• Projet de migration vers Snowflake dans un contexte critique avec enjeux de continuité 24/7

• Environnement orienté RUN industrialisé : observabilité, monitoring 24/7, structuration N1/N2/N3