Senior Data Engineer

Что предстоит делать

<p><b>МОЙ БАНК — МОЯ ОПОРА.</b></p><p>Опора миллионов украинцев, кто отныне говорит «МОЁ».</p><p>МОИ ЛЮДИ. МОЁ ДЕЛО. МОЯ СВОБОДА.</p><p><b>ОЩАДБАНК</b> приглашает в команду <b>Senior Data Engineer</b></p><h3>О роли</h3><p>Ищем <b>Senior Data Engineer</b> в сильную <nobr>ML-команду</nobr> из 5 человек. Вы будете отвечать за построение надёжной инфраструктуры и конвейеров данных, которые питают наши модели и обеспечивают работу всего департамента. Это ключевая инженерная роль на стыке обработки данных и машинного обучения.</p><h3>Функциональные обязанности</h3><ul><li>Проектирование и внедрение масштабируемых конвейеров данных для обработки финансовой информации с использованием Python.</li><li>Проектирование и поддержка гибридной инфраструктуры данных, охватывающей локальные системы и AWS среду.</li><li>Внедрение и поддержка решений для интеграции данных с использованием таких инструментов как Airbyte.</li><li>Обеспечение качества данных, надёжности и производительности систем.</li><li>Сотрудничество с дата сайентистами и аналитиками для оптимизации доставки данных.</li><li>Установление лучших практик для процессов обработки данных и документации.</li></ul><h3>Квалификационные требования и технический стек</h3><p><b>1. Python стек:</b></p><ul><li>Углублённое программирование на Python (5+ лет).</li><li>Опыт работы с библиотеками обработки данных Python (Pandas, NumPy, Polars).</li><li>Профессиональное владение созданием конвейеров данных с использованием Apache Airflow.</li><li>Опыт работы с фреймворками тестирования Python (pytest и т.п.).</li><li>Знание оптимизации производительности Python.</li></ul><p><b>2. AWS экспертиза:</b></p><ul><li>Значительный опыт работы с сервисами данных AWS: Amazon S3 (озёра данных), Amazon Redshift (хранилища), AWS Glue (ETL), Amazon EMR (большие данные), AWS Lambda (serverless).</li><li>Понимание лучших практик безопасности AWS.</li><li>Опыт работы с Infrastructure as Code (Terraform / CloudFormation).</li></ul><p><b>3. Интеграция данных и локальные системы:</b></p><ul><li>Опыт работы с инструментами интеграции данных (Airbyte, Fivetran или подобные).</li><li>Знание локальных систем баз данных (PostgreSQL, MySQL и т.п.).</li><li>Опыт проектирования и внедрения озёр данных, моделирования и оптимизации.</li><li>Опыт обработки данных в реальном времени.</li></ul><p><b>4. Финансовая отрасль:</b></p><ul><li>Понимание структур и форматов финансовых данных, работа с источниками и API.</li><li>Знание требований соответствия (compliance) и безопасности финансовых данных.</li></ul><h3>Дополнительные квалификации (желательные)</h3><ul><li>Сертификации AWS (Solutions Architect, Data Analytics).</li><li>Опыт в управлении данными и безопасности.</li><li>Знание инструментов визуализации данных (Tableau, Power BI).</li><li>Опыт работы с системами контроля версий (Git) и CI/CD конвейерами.</li></ul><h3>Мы гарантируем:</h3><ul><li>Удалённый формат работы и командное сотрудничество.</li><li>Условия для профессионального и карьерного роста, работа с передовыми технологиями.</li><li>Официальное трудоустройство согласно КЗоТ (оплачиваемые больничные, отпуск от 29 календарных дней в год).</li><li>Бесплатное медицинское страхование для всех работников.</li></ul><p>Отправляйте Ваше резюме — станьте частью команды ОЩАДА! 🚀</p> <div> <a href="https://jobs.dou.ua/companies/at-oschadbank/vacancies/374440/#reply-btn-id">Откликнуться на вакансию</a> </div>