Description du poste
POSTE : Lead Databricks - Data Engineer H/F
DESCRIPTION : Dans le cadre du développement d'une plateforme Data et de plusieurs projets de transformation, notre client recherche un(e) Lead Databricks / Data Engineer Senior.
Vous interviendrez comme référent(e) technique sur les sujets Data Engineering et Databricks, avec un rôle transverse auprès des différentes équipes projet.
Vous serez notamment amené(e) à :
- Concevoir et faire évoluer l'architecture Data
- Concevoir, développer et optimiser des pipelines de données sur Databricks
- Participer à la définition des patterns et standards d'architecture Data Engineering
- Garantir la robustesse, la performance et la maintenabilité des traitements
- Accompagner les équipes projet sur leurs problématiques techniques
- Apporter un appui technique transverse aux Data Engineers et équipes projet
- Identifier les risques techniques et proposer des solutions adaptées
- Participer aux choix d'architecture et aux décisions techniques
- Effectuer des revues de code et contribuer à la diffusion des bonnes pratiques
- Accompagner la résolution des incidents et problématiques complexes
- Contribuer à l'amélioration continue de la plateforme et des processus Data Engineering
- Assurer une veille sur les technologies et pratiques Data pertinentes
PROFIL
- Expérience significative en Data Engineering, avec un niveau Senior
- Solide expertise de Databricks
- Expérience en conception d'architectures Data et développement de pipelines
- Bonne maîtrise des problématiques d'intégration, transformation et traitement de données
- Capacité à intervenir sur des sujets techniques complexes
- Expérience en accompagnement ou mentoring de profils Data Engineers
- Capacité à travailler en transverse avec plusieurs équipes projet
- Bonnes qualités de communication et capacité à vulgariser des sujets techniques
- Autonomie, rigueur et sens des responsabilités.
Environnement technique
Selon les projets, l'environnement pourra notamment inclure :
- Databricks
- Data Lake / Lakehouse
- Pipelines Data
- ETL
- SQL / Python
- Cloud Data Platform
- Outils d'orchestration et d'industrialisation
Keywords
OrchestrationPythonSqlMaintainabilityBig data
Ce poste vous intéresse ?
