Lead Data Engineer (FH)

Le Lead Data Engineer est responsable de la cohérence technique de lindustrialisation et de la robustesse de la Data Platform et des pipelines de données. Il agit comme référent technique senior garant des standards dingénierie et de la qualité des implémentations des orientations définies par le Head of Data. 

Son rôle est dassurer que les solutions data sont fiables performantes scalables et maintenables sans responsabilité managériale hiérarchique. 

Missions :

1. Standards dingénierie et cohérence technique 

Définir avec le Head of Data les standards techniques applicables aux développements data : 

• Patterns darchitecture des pipelines (ingestion transformation exposition)
• Standards de développement (Spark SQL Python notebooks) 
• Bonnes pratiques de modélisation physique et logique  
• Règles de performance optimisation et maîtrise des coûts  
• Guidelines de qualité logicielle appliquées à la data  
• Veiller à leur application cohérente dans les équipes Data Engineering. 

2. Industrialisation des pipelines et data products 

Garantir la robustesse des solutions data en production : 

• Structuration des pipelines critiques et réutilisables  
• Fiabilisation des traitements (idempotence reprise backfill) 
• Optimisation des performances et des coûts de traitement  
• Réduction de la complexité technique et de la dette existante  
• Contribution à la standardisation des patterns de delivery 

3. Qualité technique et excellence dingénierie 

Promouvoir des pratiques dingénierie proches du software engineering : 

• Mise en place de tests (unitaires intégration data quality)  
• CI/CD des pipelines et notebooks  
• Versioning des assets data (code datasets modèles)  
• Observabilité technique (logs monitoring métriques)  
• Revue de code et validation des designs techniques 

4. Référent technique transverse 

Intervenir comme point de référence sur les sujets complexes : 

• Revue des architectures de pipelines critiques  
• Validation des choix techniques structurants
• Support sur les problématiques de performance et de scalabilité  
• Arbitrage technique sur des sujets dimplémentation complexes 
• Diffusion des bonnes pratiques auprès des équipes Data Engineering  

 Sans responsabilité hiérarchique mais avec un rôle de référence technique reconnue 

5. Support à la Data Platform - en lien avec le Head of Data : 

• Contribution à lévolution de la plateforme (ex : Microsoft Fabric)  
• Définition des standards dusage des composants techniques 
• Alignement des implémentations avec larchitecture cible 
• Sécurisation de la cohérence entre domaines data 
• Contribution à la réduction des risques techniques (fragilité coûts duplication) 

6. Support à la Data Platform - en autonomie :

• Analyse des performances des pipelines 
• Optimisation des coûts de compute et de stockage  
• Identification et suppression des redondances techniques  
• Amélioration de la résilience des traitements  
• Contribution à la simplification de larchitecture existante 

Qualifications :

• Vous avez une expérience dau moins 5 ans dans la gestion de projets Data avec un focus sur lévolution de lingénierie de la donnée ;
• Maitrise des concepts de modélisation de données et de conception darchitectures Data ;
• Python & SQL : vous savez coder. Vous connaissez et savez lancer des procédures stockées ;
• Compétences en gestion de bases de données relationnelles ;
• Langue : La maîtrise de langlais est requise pour pouvoir échanger avec une partie de nos équipes qui nest pas francophone

Informations supplémentaires :

• Eléments essentiels :
  • La localisation du poste : 140 avenue des Champs-Elysées 75008 Paris
  • Le type de contrat : CDI
  • Le poste est ouvert au télétravail jusquà 2 jour par semaine 10 jours flottants par an (soit 100 jours par an)
• Autres avantages :
  • Abonnement GymLib personnalisable
  • Jusquà 12 jours de repos par an
  • Prime vacances chèques-cadeaux
  • Intéressement / participation
  • Ticket-restaurant (10 x 19 par mois) pris en charge à 60%

Remote Work :

No

Employment Type :

Full-time