Aller au contenu principal

Data Engineer Python SAS GCP - Freelance (H/F)

Technologie
Collective.work
Paris, FranceIl y a 1 mois
Contrat de prestation de services

Description du poste

CONTEXTE

Au sein des équipes Data & Analytics, vous rejoindrez l'équipe Décisionnel Dommage dont la mission est de mettre à la disposition des métiers, via une plateforme BI, les données et outils nécessaires aux études et aux reportings de l'entreprise.

La plateforme hébergeant ces données est basée sur la solution SAS (SAS 9.4 sous Windows). Un projet de modernisation majeur a débuté avec une migration du patrimoine vers Google Cloud Platform et une ressource supplémentaire est recherchée pour migrer les programmes et en développer de nouveaux.

Le candidat intégrera une équipe de 6 collaborateurs internes (business analyst, data engineer, chefs de projets) et des ressources externes. Il travaillera en étroite collaboration avec les chefs de projets de l'équipe.

MISSIONS

Concevoir et développer des pipelines de données robustes et scalables (ETL/ELT)

Garantir la qualité des données via la mise en œuvre de tests automatisés et de contrôles qualité

Contribuer aux chiffrages et à la planification des développements

Assurer la documentation technique des solutions mises en œuvre

Accompagner et mentorer les développeurs juniors et confirmés

LIVRABLES ATTENDUS

Documentation technique des pipelines développés

Code source versionné et testé, conforme aux standards définis

Reporting régulier sur l'avancement des travaux

Participation aux comités techniques et aux revues d'architecture

COMPÉTENCES TECHNIQUES

Python avancé : maîtrise des frameworks data (PySpark, Pandas, Polars, Dask)

Orchestration : Airflow, Prefect ou équivalent

Cloud : expérience sur au moins un provider (AWS, Azure, GCP) - environnement GCP privilégié

SQL : maîtrise avancée, optimisation de requêtes

Outils de versioning : Git, GitLab/GitHub

CI/CD : mise en place et gestion de pipelines d'intégration continue

Conteneurisation : Docker, Kubernetes (apprécié)

Qualité de code : tests unitaires, SonarQube, .

SAS : connaissance du langage SAS serait un atout pour réaliser la migration

COMPÉTENCES FONCTIONNELLES

Bonne compréhension des enjeux data (gouvernance, qualité, sécurité des données)

Connaissance des concepts de Data Mesh ou Data Fabric (apprécié)

Sensibilité aux problématiques de conformité et de protection des données (RGPD)

CONDITIONS DE TRAVAIL

Lieu de la mission : Paris

Démarrage ASAP

2 jours de télétravail

Anglais professionnel obligatoire

Séniorité requise : 8 à 10 ans d'expérience minimum

  • 8 à 10 ans d'expérience minimum en Data Engineering
  • Maîtrise avancée de Python et des frameworks data tels que PySpark, Pandas, Polars, Dask
  • Expérience en orchestration avec Airflow, Prefect ou équivalent
  • Expérience sur au moins un provider cloud (AWS, Azure, GCP) avec une préférence pour GCP
  • Maîtrise avancée de SQL et optimisation de requêtes

6.

Compétences en outils de versioning : Git, GitLab/GitHub

  • Expérience en CI/CD et gestion de pipelines d'intégration continue
  • Connaissance de la conteneurisation avec Docker et Kubernetes (apprécié)
  • Pratique des tests unitaires et outils de qualité de code comme SonarQube
  • Connaissance du langage SAS (atout pour la migration)

11.

Bonne compréhension des enjeux data : gouvernance, qualité, sécurité des données

  • Connaissance des concepts de Data Mesh ou Data Fabric (apprécié)
  • Sensibilité aux problématiques de conformité et de protection des données (RGPD)
  • Anglais professionnel obligatoire
Keywords
GitLabOrchestrationSonarQubeDaskPlatform economyAirflowPythonSqlCI/CD

Ce poste vous intéresse ?