43 2 мес. назад

Senior LLM Engineer

Вакансия для опытного инженера, который будет заниматься проектированием и доведением до качества LLM/ML пайплайнов. Требуется уверенное знание Python и опыт интеграции LLM в продакшен. Ожидается работа с высокими ставками и контроль метрик качества.

senior
Опубликовано
30 декабря 2025
Вакансии в Telegram-канале
Свежие вакансии Каждый день
Подписаться
??%
Match Score
Войдите и создайте резюме
Войти

описание

Навыки: LLM, Python. Квалификация: Senior. Специализации: ML разработчик. Ищем сильного **Senior LLM Engineer**, который умеет проектировать **масштабируемые LLM/ML‑пайплайны под речевую аналитику end‑to‑end**: от ASR до извлечения событий/инсайтов, с контролем качества и себестоимости. Масштаб: десятки тысяч звонков в день. **Важно: роль hands‑on, с ответственностью за метрики качества/стоимости в проде,** а не только за текст промптов. Что нужно уметь: **1) Проектировать пайплайн:** разделение на этапы пайплайна и интерфейсы между ними (контракты вход/выход, форматы, версии); чёткое разделение детерминированных шагов и LLM‑вычислений; построение каскадов критериев и гейтов (быстрые дешёвые проверки → LLM только когда нужно); воспроизводимость (конфиги, версии, трассировка). **2) Доводить качество:** эталонный датасет, автоматические evals и регрессионные тесты; работа с precision/recall (FN/FP), разбор ошибок “по корзинам”; системные итерации промптов/декомпозиции до целевых метрик; удержание баланса точность/стоимость/скорость (в т.ч. через ограничение контекста и число вызовов). **3) Работать с High‑stakes сценариями:** пороги и подтверждения, fail‑safe поведение, human‑in‑the‑loop, логирование и аудит (трассировка входов/выходов/версий), контроль рисков и регрессий. Ожидаем: уверенный **Python + опыт интеграции LLM** в прод (API, очереди, логи). Плюсом будет: **RAG** и **tool‑calling**, опыт продакшн‑**мониторинга качества и стоимости**. **Результат работы:** - Design doc пайплайна + интерфейсы/контракты между этапами - Промпты + Eval + golden set + регрессионные тесты - Мониторинг качества/стоимости в проде (дашборды/алерты/разбор инцидентов) Для кандидатов предусмотрен оплачиваемый этап с 2 тестовыми заданиями не больше 3-4 часов суммарно: 1 архитектурное, 1 hands on

Похожие вакансии

6 вакансии
Kaspi.kz
Kaspi.kz
1 д. назад

Разработчик ETL/ELT процессов

Вакансия в Kaspi.kz для разработчика ETL/ELT процессов. Основные требования: опыт работы с Oracle, PL/SQL, SQL, Python и Airflow. Предлагаем карьерный рост, обучение и комфортные условия работы в офисе в Алматы.

Oracle Pl/SQL · Python · Apache Airflow ·+3

middle Алматы
AIR ASTANA, АО
AIR ASTANA, АО
2 д. назад

Старший разработчик ETL процессов ( Data Engineer)

Ищем специалиста для разработки и оптимизации ETL-процессов. Основные требования: знание SQL, опыт работы с Python и облачными платформами. Предлагаем офис в центре города, медицинскую страховку и программы лояльности.

middle Алматы
АО «Казтелепорт»
АО «Казтелепорт»
3 д. назад

BackEnd Middle разработчик Python Django / FastAPI

Присоединяйтесь к команде АО «Казтелепорт» и участвуйте в создании масштабных IT-решений. Мы предлагаем стабильную работу, обучение и развитие, а также комфортные условия труда и дополнительные бонусы, такие как медицинская страховка и возможность участия в спортивных мероприятиях.

Python · ORM · Django Framework ·+1

middle Алматы
Dreamlab Technologies Ltd
Dreamlab Technologies Ltd
2 д. назад

Python разработчик

500 000 - 800 000 KZT

Вакансия для Python разработчика с опытом от 3 лет. Основные задачи включают разработку веб-приложений на Django, создание REST сервисов и работу с базами данных. Предлагаем официальное трудоустройство и возможности для профессионального роста.

Python · Django Framework · REST ·+3

middle Астана
BePRO
BePRO
3 д. назад

Backend-разработчик

150 000 - 500 000 KZT

Ищем разработчика с опытом работы на Python от 2 лет, который хорошо знает Django и имеет навыки работы с Celery и PostgreSQL. Ваша задача будет заключаться в разработке и оптимизации серверной части приложений, а также в поддержке CI/CD процессов.

Python · Django Framework · Linux ·+6

middle Алматы
Крупнейшая российская страховая компания
Крупнейшая российская страховая компания
1 д. назад

Python разработчик

Присоединяйтесь к команде, которая работает над инновационной платформой для страхования. Мы ищем специалиста с опытом в Python и высоконагруженных системах, который сможет внести свой вклад в проектирование и реализацию новых решений. Предлагаем гибридный график работы и заботу о здоровье сотрудников.

senior удал.