Python DevOps Engineer (Azure & Databricks)
HaysOpis stanowiska
Hays Contracting Services to współpraca oparta na zasadach B2B. Obecnie poszukujemy kontraktora B2B do realizacji usług w obszarze automatyzacji, DevOps oraz rozwoju platformy danych opartej na Azure i Databricks w ramach projektu dla klienta z branży finansowej.
Python DevOps Engineer (Azure & Databricks)
Lokalizacja: 100% zdalne świadczenie usług (mogą pojawić się okazjonalne wizyty w biurze w Warszawie)
Rodzaj współpracy: Kontrakt B2B za pośrednictwem Hays.
Stawka: Otwarta, ustalana na podstawie doświadczenia, kompetencji oraz oczekiwań finansowych kontraktora.
Branża: finansowa / inwestycyjna
Opis projektu
Projekt obejmuje rozwój, automatyzację i utrzymanie platformy danych wykorzystującej technologie Microsoft Azure oraz Azure Databricks. Zakres współpracy łączy obszary DevOps, Cloud, Data Platform oraz Python Development.Środowisko technologiczne
Python | Microsoft Azure | Azure Databricks | Terraform | Pulumi | GitHub Actions | Azure DevOps | ADLS Gen2 | Azure SQL | Entra ID | PySpark | Delta Lake | Docker | Kubernetes | AI/LLM APIs
Zakres usług
- automatyzacja i utrzymanie środowisk Azure oraz Azure Databricks;
- tworzenie i rozwój narzędzi automatyzacyjnych w Pythonie;
- budowa i rozwój procesów CI/CD z wykorzystaniem GitHub Actions lub Azure DevOps;
- zarządzanie infrastrukturą jako kodem przy użyciu Terraform lub Pulumi;
- automatyzacja wdrożeń Databricks, w tym DAB, Jobs, Workflows oraz Unity Catalog;
- zapewnienie monitoringu, bezpieczeństwa i niezawodności platformy danych;
- współpraca z Data Engineerami przy wdrażaniu rozwiązań Python i PySpark;
- rozwiązywanie problemów związanych z infrastrukturą, wdrożeniami oraz pipeline’ami;
- wdrażanie standardów inżynierskich i automatyzacja procesów manualnych.
- bardzo dobra znajomość Pythona oraz doświadczenie w automatyzacji procesów ;
- praktyczne doświadczenie z Microsoft Azure, w szczególności ADLS Gen2, Key Vault, Azure SQL i Entra ID ;
- znajomość Infrastructure as Code z wykorzystaniem Terraform lub Pulumi;
- doświadczenie z Azure Databricks , Unity Catalog oraz Delta Lake ;
- praktyczna znajomość PySpark i wdrażania rozwiązań data engineering;
- doświadczenie w budowie i utrzymaniu procesów CI/CD przy użyciu GitHub Actions lub Azure DevOps;
- znajomość testów automatycznych, w tym pytest, REST API oraz dobrych praktyk programistycznych;
- wiedza z zakresu bezpieczeństwa chmury, monitoringu i observability;
- doświadczenie w realizacji projektów prowadzonych zgodnie z metodykami Agile.
- analiza profilu i doświadczenia przez zespół Hays;
- rozmowa z konsultantem Hays dotycząca projektu i zakresu usług;
- spotkanie techniczne z przedstawicielami projektu, maksymalnie dwa etapy;
- uzgodnienie warunków współpracy;
- rozpoczęcie realizacji usług.
Interesuje Cię ta oferta?