Data Engineer

Что предстоит делать

<p><strong>Ciklum</strong> ищет <strong>Data Engineer</strong> для присоединения к нашей команде на полную занятость в Украине.</p> <p>Мы — компания по разработке заказных продуктов, которая помогает как транснациональным корпорациям, так и масштабирующимся стартапам решать их самые сложные бизнес-задачи. Наша глобальная команда насчитывает более 4 000 высококвалифицированных разработчиков, консультантов, аналитиков и владельцев продуктов. Мы создаем технологии, которые переопределяют индустрии и формируют образ жизни людей.</p> <p><strong>О роли:</strong><br>В роли Data Engineer вы станете частью кросс-функциональной команды разработки, создающей впечатления будущего.</p> <p>Проект семантической документации легаси-кода — это корпоративная инициатива длительностью 26 недель для глобального лидера промышленной автоматизации. Основная цель — разработать автоматизированный конвейер с использованием ИИ для генерации структурированной системной Markdown-документации непосредственно из недокументированной кодовой базы объемом ~400K строк (охватывающей языки IEC 61131-3 и ANSI C/C++).</p> <p>Работа ведется в выделенном защищенном тенанте с нулевым экспортом данных. Техническая архитектура сочетает Tree-sitter AST-парсинг, графы знаний Neo4j, векторный поиск Qdrant и самостоятельно размещенные open-weight LLM (семейство Llama 3.1 / Mixtral) с NLI-валидацией. Поставка структурирована по 7 рабочим пакетам, выполняемым в течение 6-месячного периода, и регулируется строгими контрактными KPI: ≥95% покрытие кода, ≥92% фактическая точность, подтвержденная NLI, и ≥90% приемлемость по экспертной оценке SME. Все результаты соответствуют требованиям EU Cyber Resilience Act (EU CRA) для SBOM и трассируемости на уровне исходного кода.</p> <h2>Обязанности:</h2><ul> <li>Выполнение конвейеров данных: разработка, тестирование и поддержка надежных конвейеров данных, обрабатывающих AST-результаты, структуры графов знаний и векторные эмбеддинги</li> <li>Загрузка базы знаний: написание скриптов обработки данных для загрузки, нормализации и обновления графов зависимостей кода в Neo4j и векторных индексов в Qdrant</li> <li>Очистка и трансформация данных: парсинг сырых структур исходного кода и сырых метаданных в структурированные Markdown-ресурсы и стандартизированные JSON/RAG-входные данные</li> <li>Мониторинг и отладка конвейеров: контроль пропускной способности выполнения, устранение ошибок пакетной обработки и обеспечение согласованности состояния данных между запусками конвейера</li> <li>Сотрудничество: тесная работа со старшими Data Engineer и AI/ML-инженерами для оптимизации скорости поиска данных и эффективности конвейеров</li></ul> <h2>Требования:</h2><ul> <li>Профессиональный опыт: 3+ года коммерческого опыта в Data Engineering, включая создание и поддержку production-конвейеров данных</li> <li>Ключевые технические навыки: уверенное владение Python, SQL и стандартными фреймворками для манипуляции данными</li> <li>Практический опыт со стеком: непосредственное знание графовых баз данных (Neo4j), векторных поисковых движков (Qdrant) или фреймворков статического парсинга кода (Tree-sitter)</li> <li>Инженерные лучшие практики: владение Git для контроля версий, Docker-контейнеризацией, unit/integration-тестированием конвейеров данных и CI/CD-процессами</li> <li>Решение проблем и внимание к деталям: сильные аналитические навыки с фокусом на точность данных, согласованность схем и валидацию результатов</li> <li>Язык: профессиональное владение английским (B2+/C1)</li></ul> <h2>Что мы предлагаем?</h2><ul> <li>Сильное сообщество: работа бок о бок с лучшими профессионалами в дружелюбной среде с открытой дверью</li> <li>Фокус на росте: участие в масштабных проектах с глобальным влиянием и расширение вашей экспертизы</li> <li>Индивидуальное обучение: повышение квалификации через внутренние мероприятия (митапы, конференции, воркшопы), доступ к Udemy, языковые курсы и сертификации за счет компании</li> <li>Безграничные возможности: изучение различных доменов через внутреннюю мобильность, поиск наилучшего варианта для получения практического опыта с передовыми технологиями</li> <li>Гибкость: радикальная гибкость — работайте удаленно или из офиса, на ваш выбор</li> <li>Забота: мы обеспечиваем медицинскую страховку за счет компании, поддержку психического здоровья, а также финансовые и юридические консультации</li></ul> <p><strong>О нас:</strong></p> <p>В Ciklum мы всегда исследуем инновации, вдохновляем друг друга на большие достижения и создаем решения, которые имеют значение. С нами вы будете работать с передовыми технологиями, вносить вклад в значимые проекты и станете частью культуры One Team, которая ценит сотрудничество и прогресс.<br><br>Будучи одной из крупнейших IT-компаний Украины и лучшим работодателем по версии Forbes, мы уже более 20 лет создаем значимые технологические решения. Мы с гордостью поддерживаем разнообразные таланты и военных ветеранов, признавая их уникальные навыки и перспективы, которые они привносят в формирование будущего.<br></p> <p><strong>Исследуй, развивай, создавай вместе с Ciklum!</strong></p><p>Уже заинтересованы? Мы будем рады познакомиться с вами! Отправляйте заявку. С нетерпением ждем встречи в Ciklum.</p> <div> <a href="https://jobs.dou.ua/companies/ciklum/vacancies/368733/#reply-btn-id">Відгукнутись на вакансію</a> </div>