Databricks Azure Engineer

Job Description

Technische expertise

• Grondige kennis van SAP BW (inclusief Inventory-flows), met ervaring in standard + Z extractors vanuit SAP R/3 of S/4.

• Ervaring met ETL-processen in Azure Data Factory, inclusief het verbinden met SAP via Data Flows en het optimaliseren van performance.

• Hands-on ervaring met Databricks (PySpark): performantie-analyse, optimalisatie van MERGE / OPTIMIZE / ANALYZE, en kostmonitoring.

• Sterke kennis van Power BI, met focus op het opzetten van semantische modellen (fact & dimensiestructuren vergelijkbaar met Composite Providers in SAP).

• In staat om volledige SAP BW-flows te migreren naar Azure (ADF + Databricks + Power BI).

Performance & kostoptimalisatie

• Ervaring met het verbeteren van laadtijden en performantie van data pipelines (ADF runtime tuning, parallelisatie, partitionering).

• Kennis van Databricks Delta Lake performance-tuning (ZORDER, file size management, vacuum, analyze statistics).

• Ervaring met het monitoren van Azure-kosten en het instellen van alerts en auto-stop policies.

Architectuur & best practices

• Begrip van data lakehouse architecturen en data governance-principes.

• Kennis van SLA’s, logging, monitoring en documentatie van datastromen.

• Ervaring met het hertekenen van BW-transformaties (ABAP/AMDP) in PySpark.

Profiel

• Hands-on Data Engineer / BI Consultant met 5+ jaar ervaring in SAP BW en minstens 2 jaar ervaring met Azure Data Factory en Databricks.

• Analytisch, resultaatgericht en sterk in het documenteren en overdragen van kennis.

• Communicatief sterk — kan schakelen tussen IT, data-engineering en business.

• Teamspeler die zelfstandig kan werken in complexe omgevingen.