Aller au contenu principal

Data Engineering Java / Scala Expérimenté (H/F)

Technologie
Free-Work
Lyon, France40 000 € - 53 000 € /anIl y a 1 semaine
Temps plein

Description du poste

Pour renforcer son pôle Data Engineering, la Direction des Systèmes d’Information de notre client recherche un Ingénieur Data Engineering Java/Scala expérimenté, spécialisé en conception et développement de pipelines de données complexes, sous la responsabilité du Tech Lead.

Missions principales

  • Concevoir, développer et maintenir des pipelines de données robustes sur Google Cloud Platform (GCP) pour assurer la collecte, le traitement et l’analyse des données.
  • Intégrer des solutions d’IA générative et des agents IA dans les flux de données pour optimiser les processus métiers.
  • Collaborer avec les équipes pluridisciplinaires pour aligner les besoins opérationnels et décisionnels.
  • Automatiser les workflows data via des outils de CI/CD (GitLab CI/CD, Docker Compose).
  • Optimiser les traitements de gros volumes de données avec Apache Spark, Kafka, BigQuery et DBT.

Profil candidat

Formation / Expérience

  • Diplômé d’une école d’ingénieurs ou titulaire d’un Master (Bac+5) en informatique, data science ou équivalent.
  • Minimum 3 à 7 ans d’expérience en Data Engineering avec une expertise en Java/Scala, GCP, et les architectures de streaming (Kafka, Spark).

Compétences techniques

  • Scala/Java (programmation fonctionnelle)
  • Google Cloud Platform (GCP), BigQuery, SQL avancé
  • Apache Kafka, Apache Spark, DBT, PubSub
  • CI/CD (GitLab CI/CD, Docker Compose), Linux, Git

Qualités personnelles

  • Rigueur et autonomie dans la gestion des projets critiques
  • Esprit collaboratif et capacité à travailler en méthodologie Agile/Scrum
  • Analyse et résolution de problèmes avec une approche orientée amélioration continue
  • Excellente communication

Keywords
GitLabScalaApache KafkaApache SparkLinuxScrumSqlApache Http ServerJavaCI/CDBig dataBigQuery

Ce poste vous intéresse ?