Data Engineering Java / Scala Expérimenté (H/F)
Technologie
Lyon, France40 000 € - 53 000 € /anIl y a 1 semaine
Temps plein
Description du poste
Pour renforcer son pôle Data Engineering, la Direction des Systèmes d’Information de notre client recherche un Ingénieur Data Engineering Java/Scala expérimenté, spécialisé en conception et développement de pipelines de données complexes, sous la responsabilité du Tech Lead.
Missions principales
- Concevoir, développer et maintenir des pipelines de données robustes sur Google Cloud Platform (GCP) pour assurer la collecte, le traitement et l’analyse des données.
- Intégrer des solutions d’IA générative et des agents IA dans les flux de données pour optimiser les processus métiers.
- Collaborer avec les équipes pluridisciplinaires pour aligner les besoins opérationnels et décisionnels.
- Automatiser les workflows data via des outils de CI/CD (GitLab CI/CD, Docker Compose).
- Optimiser les traitements de gros volumes de données avec Apache Spark, Kafka, BigQuery et DBT.
Formation / Expérience
- Diplômé d’une école d’ingénieurs ou titulaire d’un Master (Bac+5) en informatique, data science ou équivalent.
- Minimum 3 à 7 ans d’expérience en Data Engineering avec une expertise en Java/Scala, GCP, et les architectures de streaming (Kafka, Spark).
- Scala/Java (programmation fonctionnelle)
- Google Cloud Platform (GCP), BigQuery, SQL avancé
- Apache Kafka, Apache Spark, DBT, PubSub
- CI/CD (GitLab CI/CD, Docker Compose), Linux, Git
- Rigueur et autonomie dans la gestion des projets critiques
- Esprit collaboratif et capacité à travailler en méthodologie Agile/Scrum
- Analyse et résolution de problèmes avec une approche orientée amélioration continue
- Excellente communication
Keywords
GitLabScalaApache KafkaApache SparkLinuxScrumSqlApache Http ServerJavaCI/CDBig dataBigQuery
Ce poste vous intéresse ?