Data Engineer

Что предстоит делать

<p>Краткое описание вакансии</p><p>В роли Data Engineer вы будете создавать и поддерживать миграции данных и пайплайны с использованием Python, Spark и Databricks (AWS). Вы будете работать с данными из различных систем-источников, улучшать существующие миграции и обеспечивать точную и надёжную передачу данных.</p><p>Вам не нужно иметь опыт работы со Spark или Databricks с первого дня. Навыки уверенного владения Python и хорошее понимание обработки данных важнее. Вы также будете использовать AI-инструменты для написания кода в своей повседневной работе.</p><p>Требования</p><ul><li>3–5 лет опыта в разработке ПО / data engineering на старшем уровне ответственности.</li><li>Уверенное владение Python.</li><li>Ежедневное практическое использование AI-инструментов для написания кода (например, Claude Code, Cursor, Copilot или аналогичных) в реальной инженерной работе и умение проверять то, что они выдают.</li><li>Уверенное владение SQL и хорошее чутьё в области моделирования данных (глубокая экспертиза приветствуется, но этому можно научить).</li><li>Комфортная работа в среде Linux / macOS и в облачной среде для работы с данными (в идеале AWS).</li><li>Подтверждённый опыт создания решений, которые надёжно работают в продакшене.</li><li>Комфорт в условиях неопределённости, быстрое обучение и здравомыслие, включая обратную разработку запутанных, недокументированных исходных данных.</li><li>Английский на уровне Upper-Intermediate (B2).</li></ul> <p>Обязанности</p><ul><li>Создавать и поддерживать пайплайны миграции данных с использованием Python.</li><li>Разрабатывать новые миграции из различных систем-источников.</li><li>Улучшать существующие миграции, включая обработку ошибок, восстановление и мониторинг.</li><li>Работать с легаси-системами и данными, которые могут быть неполными, несогласованными или плохо документированными.</li><li>Выявлять и устранять проблемы качества данных.</li><li>Использовать AI-инструменты для написания кода, чтобы писать, проверять и тестировать код.</li><li>Работать с инженерной командой над решением технических задач.</li></ul> <p>О проекте</p><p>Вы будете работать над SaaS-платформой для ювелирного бизнеса, помогая менеджерам магазинов автоматизировать их повседневные операции. Наша команда: Team Lead, Full-Stack Developer, React Developer, React Native Developer и Product Designer.</p> <p>Бонусные баллы:</p><ul><li>Spark / Databricks.</li><li>Знание сервисов AWS для работы с данными (S3, Glue, EMR).</li><li>Опыт с крупномасштабными миграциями данных / POS-системами или другим легаси-ПО / системами отчётности или кастомными дашбордами.</li></ul><p>Мы предоставляем</p><ul><li>Отпуск 18 рабочих дней в год, 10 дней по больничному.</li><li>Постоянный пересмотр производительности и зарплаты.</li><li>Компенсация мероприятий по профессиональному развитию: 50% покрывается после испытательного срока.</li><li>Бесплатные внутренние занятия по английскому языку.</li><li>Гибкий график работы, удалённо.</li><li>Финансовая компенсация коворкинга 100% (во время блэкаутов).</li><li>Компания предоставляет оборудование. Мы предоставим ноутбук после 6 месяцев работы, а если вы захотите любую другую технику, чтобы облегчить вашу работу, мы покроем 50% её стоимости.</li></ul><p><b> </b></p><p>Если вы сильны в Python и основах работы с данными, но ещё не работали именно со Spark, Databricks или AWS, мы всё равно хотим услышать от вас.</p> <div> <a href="https://jobs.dou.ua/companies/uitop/vacancies/379284/#reply-btn-id">Откликнуться на вакансию</a> </div>