Data Engineer

Что предстоит делать

<p><strong>УКРЭКСИМБАНК приглашает принять участие в конкурсе на вакансию Data Engineer</strong></p><p>Мы ищем Дата инженера для построения и сопровождения ETL/ELT-пайплайнов в команду дата инженеров. Главная задача — проектирование, разработка и надёжная эксплуатация конвейеров данных между источниками (Oracle / PostgreSQL) и целевыми хранилищами (PostgreSQL, AWS), с оркестрацией через Apache Airflow.</p><p><strong>С нами вы получите:</strong></p><ul><li>Работу в государственном экспортно-импортном банке;</li><li>Официальное трудоустройство;</li><li>Дополнительные дни календарного отпуска;</li><li>Доступ к программам обучения и тренингам;</li><li>Широкие возможности для профессионального развития.</li></ul><p><strong>Функциональные обязанности:</strong></p><ul><li>Разработка и поддержка DAG’ов в Apache Airflow: расписание, зависимости, retry-логика, алертинг</li><li>Построение ETL/ELT-пайплайнов для загрузки данных из Oracle и/или PostgreSQL</li> <li>Реализация инкрементальных (delta) загрузок по дате/ID с автоматическим определением изменений</li><li>Оптимизация производительности загрузок (bulk-операции, COPY FROM STDIN, партиционирование)</li><li>Построение пайплайнов выгрузки данных в AWS (S3, Parquet-формат)</li><li>Реализация инкрементальных (delta) загрузок по дате/ID с автоматическим определением изменений</li><li>Оптимизация производительности загрузок (bulk-операции, COPY FROM STDIN, партиционирование)</li><li>Построение пайплайнов выгрузки данных в AWS (S3, Parquet-формат)</li><li>Мониторинг качества данных: валидация, согласованность схем, обработка ошибок и дубликатов</li><li>Сопровождение существующих пайплайнов: диагностика сбоев, рефакторинг, документирование</li><li>Взаимодействие с аналитиками и владельцами систем-источников для согласования структур данных</li><li>Ведение технической документации по пайплайнам и схемам данных</li></ul><p><strong>Наши ожидания:</strong></p><ul><li>Высшее образование</li><li>Опыт работы с Apache Airflow от 1 года (DAG’и, операторы, sensors, XCom)</li><li>Уверенное знание SQL и опыт работы с Oracle или MSSQL</li><li>Опыт работы с PostgreSQL как целевой СУБД</li><li>Python на уровне написания production-кода (ETL-скрипты, обработка ошибок, логирование)</li><li>Понимание принципов ETL/ELT: full load, incremental load, CDC</li><li>Базовый опыт работы с AWS (S3 как минимум; понимание IAM/ролей доступа)</li><li>Понимание работы с форматом Parquet и колоночными хранилищами</li></ul><p><strong>Будет плюсом:</strong></p><ul><li>PL/SQL (пакеты, процедуры, триггеры) — при работе с Oracle</li><li>Docker / Docker Compose</li><li>BI-инструменты (Superset, Power BI и т.п.)</li><li>Опыт в банковской/регулируемой сфере</li><li>AWS</li></ul><p>Просим направлять развёрнутые резюме с указанием названия вакансии и желаемого уровня з/п.</p><p>Мы внимательно рассматриваем каждое полученное резюме. Если вы не получили ответ в течение <nobr>14-ти</nobr> дней, это будет означать, что на данный момент у нас нет вакансии, которая соответствует вашему опыту работы и квалификации.</p> <div> <a href="https://jobs.dou.ua/companies/ukreksimbank/vacancies/375272/#reply-btn-id">Откликнуться на вакансию</a> </div>