QA-инженер (ML)
Нужен QA-инженер для продукта Naimus, который будет отвечать за качество ML-моделей, данных и самого продукта: считать метрики, гонять A/B-тесты, искать переобучение и граничные случаи, тестировать API и интерфейс. Ждут опыт в тестировании от 3 лет, понимание метрик классификации и SQL, плюс Python или JS/Java для чтения кода и автотестов. Предлагают 150–200 тыс. ₽ gross, гибрид или удалёнку, полный день и рост в сторону ML QA Lead или MLOps.
Отклик отправляется на сайте источника. Регистрация в Taylor для перехода не нужна.
Зарплата на уровне рынка
В пределах ±10% медианы QA по 154 вакансиям за 90 дней, рынок — СНГ (RUB); город и грейд вакансии не учтены.
Что предстоит делать
ТЕСТОВАЯ ВАКАНСИЯ О компании и проекте Компания iFellow разрабатывает продукт Naimus. Мы ищем QA-инженера, который будет отвечать за качество и самих моделей, и данных, и продукта вокруг них.
- Оценивать качество ML-моделей на разных наборах данных: считать и интерпретировать accuracy, precision, recall, F1-score, AUC-ROC и другие метрики в контексте конкретной задачи.
- Проводить A/B-тесты разных версий моделей и анализировать результаты.
- Выявлять переобучение (overfitting) и недообучение (underfitting) и разбирать их причины вместе с ML-командой.
- Проверять модели на предвзятость (fairness): искать сценарии, где модель работает несправедливо по отношению к группам пользователей (пол, возраст, раса и др.).
- Тестировать данные: полноту, консистентность, корректность форматов, качество обучающих и валидационных выборок.
- Проверять AI-функциональность: корректность и уместность ответов, работу с контекстом, релевантность рекомендаций.
- Искать граничные случаи и создавать adversarial-примеры, которые могут сломать или обмануть модель.
- Проверять устойчивость модели к отравлению данных (data poisoning) и поведение на данных, сильно отличающихся от обучающей выборки (out-of-distribution).
- Проводить функциональное тестирование продукта (API, интеграции, интерфейс).
- Разрабатывать тест-планы, тест-кейсы и чек-листы, оформлять баг-репорты и проводить анализ первопричин (Root Cause Analysis).
Что ждём от вас
- Опыт и QA-база
- Опыт в тестировании от 3 лет.
- Уверенное владение техниками тест-дизайна, умение писать тест-кейсы, чек-листы и тест-планы.
- Умение оформлять баг-репорты: чёткие шаги воспроизведения, логи, скриншоты.
- Умение декомпозировать сложную проблему и находить корневую причину.
- ML и данные
- Понимание метрик качества классификации (accuracy, precision, recall, F1, AUC-ROC) и умение выбирать метрику под задачу.
- Понимание, что такое переобучение, недообучение и смещение/дисперсия (bias-variance).
- Базовое понимание того, как устроен процесс обучения и валидации моделей.
- Технические навыки
- SQL: SELECT, WHERE, JOIN (INNER и LEFT), GROUP BY, ORDER BY; опыт работы с PostgreSQL или MySQL.
- Тестирование REST API: Postman, Swagger; форматы JSON и XML.
- Опыт работы с баг-трекером (Jira или аналог).
- Python (предпочтительно) или JavaScript/Java на уровне, достаточном, чтобы читать чужой код и писать автотесты.
- Личные качества
- Умеешь отстаивать позицию перед командой.
- Самостоятельно планируешь работу и принимаешь решения.
- Готов (а) находить и описывать новые классы дефектов, характерные для ML-систем.
- Будет плюсом
- Опыт тестирования ML-или LLM-продуктов.
- Python-инструменты для анализа данных: pandas, scikit-learn, pytest.
- Инструменты для проверки данных и мониторинга моделей (Great Expectations, MLflow, Evidently и аналоги).
- Опыт работы с Kafka, ELK, DevTools, СУБД
- Базовые знания статистики (доверительные интервалы, статистическая значимость в A/B-тестах).
- Опыт работы с Zephyr
Что предлагаем
Стек и инструменты
Сколько платят вам?
Анонимно укажите, сколько вы получаете как QA-инженер, — сразу покажем, в скольких вакансиях платят меньше. А из ответов сложится зарплата, которую платят на деле, а не обещают.
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Ещё в iFellow
2 активные вакансии в компании
Тестовая вакансия
Нужен QA-инженер для тестирования ML-моделей и AI-фич: проверка метрик качества, A/B тесты, тестирование данных и поиск edge cases. Требуется опыт от 3 лет, уверенный SQL, работа с API и инструментами вроде Postman, Jira, Kafka, ELK, плюс технический английский. Предлагают удалёнку, полный день, зарплату до 160 000 рублей и рост до Senior QA или автоматизатора.
Похожие вакансии
6 вакансийТестировщик ПО
Нужен тестировщик для сервиса денежных переводов: функциональное, регрессионное, UI- и usability-тестирование веба и мобильных приложений, тестирование API и работа с логами. Требуется опыт в тестировании от 3 лет, знание теории тестирования, SQL и клиент-серверной архитектуры. Предлагают удалёнку 5/2, официальное трудоустройство по ТК РФ, ДМС и корпоративные скидки.
Инженер по автоматизации тестирования (Java)
Нужен инженер по автоматизации тестирования с коммерческим опытом на Java от 2 лет и опытом мобильной автоматизации на Appium. Задачи — развивать фреймворк веб-автотестов на Selenide, внедрять API- и мобильную автоматизацию, интегрировать тесты в CI/CD и ревьюить автотесты коллег. Работа в распределённой команде Dcloud, можно со своим ноутбуком или предоставят, компенсируют IDE и курсы английского.
QA Automation Engineer (C#)
~699 400 – 1 341 258 ₸ оценка по всем рынкам
Нужен QA-инженер в команду платформы Казначейства: будете писать автотесты на C# с BDD, тестировать API и вручную проверять модули калькуляторов ставок. Ждут опыт автоматизации на C# от года, знание SOAP/REST/SQL и практики тест-дизайна. Предлагают удалёнку или гибрид, гибкий график, ДМС, квартальную премию и оплату конференций.
QA инженер (Manual QA)
~776 930 ₸ оценка по всем рынкам
Нужен manual QA инженер для двух AI-продуктов: веб-платформ, воронок и мобильных приложений. Задача — тестировать сложную продуктовую и бэкенд-логику, проверять аналитику, трекинг и платежи, вести тестовую документацию и работать в тесной связке с разработчиками и маркетингом. Требуют 3–5 лет опыта в manual QA, уверенное тестирование веба и мобилок, API и SQL, а также знание инструментов отладки. Предлагают полностью удалённую работу, гибкий график, компенсацию коворкинга, обучение и оплачиваемый отпуск.
QA Engineer (MedTech, AI)
~699 400 – 1 341 258 ₸ оценка по всем рынкам
Нужен опытный QA-инженер на part-time примерно на 2 месяца для проекта в сфере MedTech — AI-решение для анализа медицинских изображений. Задачи: функциональное, регрессионное, интеграционное и E2E-тестирование, сильное тестирование backend и REST API, работа с SQL и проверка целостности данных. Требуют 3+ года коммерческого опыта в QA, самостоятельность и английский для общения с международной командой; работа удалённая и гибкая, опыт в healthcare будет плюсом.
Middle QA Engineer (функциональное тестирование)
~699 400 – 1 341 258 ₸ оценка по всем рынкам
Нужен middle QA-инженер для функционального и интеграционного тестирования корпоративных систем: оценка трудозатрат, ведение дефектов, разработка тестовых моделей и автотестов. Ждут опыт тестирования интеграционных систем, знание методик функционального тестирования, SQL средней сложности; плюсом — Java core, REST API, Selenium/Cucumber/JUnit. Предлагают аккредитованную IT-компанию, оформление по ТК РФ и ДМС с первого дня, удалённый формат в Москве, корпоративный спорт и гибкий подход к разработке.