Przejdź do treści głównej

Python DevOps Engineer (Azure & Databricks)

Technology
Hays
1 miesiąc temu
Pełny etatStacjonarna

Opis stanowiska

Hays Contracting Services to współpraca oparta na zasadach B2B. Obecnie poszukujemy kontraktora B2B do realizacji usług w obszarze automatyzacji, DevOps oraz rozwoju platformy danych opartej na Azure i Databricks w ramach projektu dla klienta z branży finansowej.

Python DevOps Engineer (Azure & Databricks)

Lokalizacja: 100% zdalne świadczenie usług (mogą pojawić się okazjonalne wizyty w biurze w Warszawie)

Rodzaj współpracy: Kontrakt B2B za pośrednictwem Hays.

Stawka: Otwarta, ustalana na podstawie doświadczenia, kompetencji oraz oczekiwań finansowych kontraktora.

Branża: finansowa / inwestycyjna

Opis projektu

Projekt obejmuje rozwój, automatyzację i utrzymanie platformy danych wykorzystującej technologie Microsoft Azure oraz Azure Databricks. Zakres współpracy łączy obszary DevOps, Cloud, Data Platform oraz Python Development.

Środowisko technologiczne

Python | Microsoft Azure | Azure Databricks | Terraform | Pulumi | GitHub Actions | Azure DevOps | ADLS Gen2 | Azure SQL | Entra ID | PySpark | Delta Lake | Docker | Kubernetes | AI/LLM APIs

Zakres usług

  • automatyzacja i utrzymanie środowisk Azure oraz Azure Databricks;
  • tworzenie i rozwój narzędzi automatyzacyjnych w Pythonie;
  • budowa i rozwój procesów CI/CD z wykorzystaniem GitHub Actions lub Azure DevOps;
  • zarządzanie infrastrukturą jako kodem przy użyciu Terraform lub Pulumi;
  • automatyzacja wdrożeń Databricks, w tym DAB, Jobs, Workflows oraz Unity Catalog;
  • zapewnienie monitoringu, bezpieczeństwa i niezawodności platformy danych;
  • współpraca z Data Engineerami przy wdrażaniu rozwiązań Python i PySpark;
  • rozwiązywanie problemów związanych z infrastrukturą, wdrożeniami oraz pipeline’ami;
  • wdrażanie standardów inżynierskich i automatyzacja procesów manualnych.
Oczekiwane kompetencje
  • bardzo dobra znajomość Pythona oraz doświadczenie w automatyzacji procesów ;
  • praktyczne doświadczenie z Microsoft Azure, w szczególności ADLS Gen2, Key Vault, Azure SQL i Entra ID ;

  • znajomość Infrastructure as Code z wykorzystaniem Terraform lub Pulumi;

  • doświadczenie z Azure Databricks , Unity Catalog oraz Delta Lake ;
  • praktyczna znajomość PySpark i wdrażania rozwiązań data engineering;

  • doświadczenie w budowie i utrzymaniu procesów CI/CD przy użyciu GitHub Actions lub Azure DevOps;
  • znajomość testów automatycznych, w tym pytest, REST API oraz dobrych praktyk programistycznych;
  • wiedza z zakresu bezpieczeństwa chmury, monitoringu i observability;
  • doświadczenie w realizacji projektów prowadzonych zgodnie z metodykami Agile.
Proces współpracy
  1. analiza profilu i doświadczenia przez zespół Hays;
  2. rozmowa z konsultantem Hays dotycząca projektu i zakresu usług;
  3. spotkanie techniczne z przedstawicielami projektu, maksymalnie dwa etapy;
  4. uzgodnienie warunków współpracy;
  5. rozpoczęcie realizacji usług.
Współpraca realizowana jest pomiędzy przedsiębiorcami w modelu B2B i obejmuje świadczenia objęte uzgodnionym zakresem projektowym. Kontraktor samodzielnie organizuje sposób realizacji usług, z uwzględnieniem wymogów projektu, bezpieczeństwa oraz koniecznej komunikacji z klientem. Informacje o lokalizacji, dostępności lub spotkaniach projektowych mają charakter organizacyjny i nie oznaczają podporządkowania pracowniczego ani świadczenia usług pod kierownictwem klienta.

Keywords
pythondevelopment-operations-devopsazure-devopsmicrosoft-azureazure-databricksdatabricksdata-platformtraining-and-developmentterraformpulumigithubgithub-actionsazure-sqlsqlmicrosoft-entramicrosoft-entra-idinstructional-design-idpysparkdelta-lakedocker

Interesuje Cię ta oferta?