Data Engineer

УКРЕКСІМБАНК запрошує прийняти участь у конкурсі на вакансію Data Engineer

Ми шукаємо Дата інженера для побудови та супроводження ETL/ELT-пайплайнів у команду дата інженерів . Головна задача - проєктування, розробка та надійна експлуатація конвеєрів даних між джерелами (Oracle / PostgreSQL) та цільовими сховищами (PostgreSQL, AWS), з оркестрацією через Apache Airflow.

З нами ви отримаєте:

• Роботу в державному експортно-імпортному банку;
• Офіційне працевлаштування;
• Додаткові дні календарної відпустки;
• Доступ до програм навчання та тренінгів;
• Широкі можливості для професійного розвитку.

Функціональні обов'язки:

• Розробка та підтримка DAG'ів в Apache Airflow: розклад, залежності, retry-логіка, алертинг
• Побудова ETL/ELT-пайплайнів для завантаження даних з Oracle та/PostgreSQL

• Реалізація інкрементальних (delta) завантажень за датою/ID з автоматичним визначенням змін

• Оптимізація продуктивності завантажень (bulk-операції, COPY FROM STDIN, партиціювання)

• Побудова пайплайнів вивантаження даних у AWS (S3, Parquet-формат )

• Реалізація інкрементальних (delta) завантажень за датою/ID з автоматичним визначенням змін

• Оптимізація продуктивності завантажень (bulk-операції, COPY FROM STDIN, партиціювання)

• Побудова пайплайнів вивантаження даних у AWS (S3, Parquet-формат )

• Моніторинг якості даних: валідація, узгодженість схем, обробка помилок і дублікатів

• Супроводження існуючих пайплайнів: діагностика збоїв, рефакторинг, документування

• Взаємодія з аналітиками та власниками систем-джерел для узгодження структур даних
• Ведення технічної документації по пайплайнах і схемах даних

Наші очікування:

• Вища освіта
• Досвід роботи з Apache Airflow від 1 року (DAG'и, оператори, sensors, XCom)
• Впевнене знання SQL та досвід роботи з Oracle або MSSQL
• Досвід роботи з PostgreSQL як цільовою СУБД
• Python на рівні написання production-коду (ETL-скрипти, обробка помилок, логування)
• Розуміння принципів ETL/ELT: full load, incremental load, CDC
• Базовий досвід роботи з AWS (S3 щонайменше; розуміння IAM/ролей доступу)
• Розуміння роботи з форматом Parquet та колонковими сховищами

Буде плюсом:

• PL/SQL (пакети, процедури, тригери) - при роботі з Oracle
• Docker / Docker Compose
• BI-інструменти (Superset, Power BI тощо)
• Досвід у банківській/регульованій сфері
• AWS

Просимо надсилати розгорнуті резюме із зазначенням назви вакансії та бажаного рівня з/п.

Ми уважно розглядаємо кожне отримане резюме. Якщо ви не отримали відповідь протягом 14-ти днів, це означатиме, що на даний момент у нас немає вакансії, яка відповідає вашому досвіду роботи та кваліфікації.