Старший разработчик на Spark и Scala
Ищем старшего разработчика для создания MLOps/autoML платформы на Scala и Spark. Нужно проектировать структуры данных, мигрировать сервисы, писать тесты и проводить code review. Требуется опыт от 2 лет на Scala и знание Spark, плюсом будет опыт с ML и Python.
Зарплата не указана — оценили по рынку
На основе 14 похожих вакансий за 90 дней.
Что предстоит делать
Мы разрабатываем платформу конфиденциального машинного обучения и высоконагруженные сервисы данных, создающие конкурентное преимущество для бизнеса в области финтеха. Нашими продуктами пользуются 80% банковского сектора России. Мы ищем старшего разработчика на Spark и Scala для участия в создании платформы машинного обучения
- Разрабатывать MLOps/autoML платформы
- Миграция сервисов платформы на новые версии библиотек scala/spark
- Проектировать структуры хранения и представления данных
- Разрабатывать промышленные сервисы распределенной обработки данных для поставки данных на платформу машинного обучения
- Анализировать производительность и масштабировать продукты под возрастающую нагрузку
- Писать юнит и интеграционные тесты, проводить code review
- Что для этого нужно
- Опыт разработки на Scala от 2 лет
- Опыт работы со Spark
- Понимание принципов оптимизации обработки данных (знание форматов хранения данных, понимание принципов работы join и т.д.
- Понимание архитектуры и принципов работы Spark-приложений
- Навык работы с Docker, Kubernetes Будет плюсом:
- Опыт работы со SparkML
- Знания особенностей spark разных версий
- Опыт проектирования или работы с современными MLOps платформами
- Понимание принципов обучения ML-моделей
- Знание Python
- Опыт работы с базами данных Cassandra, Scylla etc.
- Трудоустройство в аккредитованную ИТ-компанию ООО «ЕдиныйФактор"
Стек и инструменты
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Ещё в МегаФон
7 активных вакансий в компании
Аналитик данных (Churn/Retention)
~629 850 – 1 219 325 ₸ оценка
Аналитик данных для работы с оттоком клиентов: поиск причин, оценка эффектов проектов, создание дашбордов. Требуются SQL, Power BI/Tableau, базовый Python и статистика. Возможна удалёнка для регионов, в Москве — офис.
iOS Team Lead
~1 292 850 ₸ оценка
Руководитель iOS-команды для разработки и поддержки мобильных приложений Megafon и Yota. Нужен опыт от 3 лет, глубокое знание Swift и Objective-C, понимание современных фреймворков. Предлагается работа в крупной компании с возможностью влиять на архитектуру и процессы.
Data Scientist (Classic ML)
~3 170 171 – 4 079 872 ₸ оценка
Ищем опытного специалиста в области машинного обучения с уверенным знанием Python и алгоритмов ML. Вам предстоит разрабатывать и внедрять модели для улучшения бизнес-показателей, а также работать с большими данными и A/B-тестированием.
Data Engineer (Hadoop)
~1 989 000 – 3 810 768 ₸ оценка
Ищем Senior Data Engineer с опытом работы с большими данными. Вам предстоит разрабатывать и оптимизировать ETL/ELT процессы, а также обеспечивать качество данных. Необходимы навыки работы с Python, SQL и системами Hadoop/Spark.
Похожие вакансии
6 вакансий
Senior/Lead Data Scientist
OBRIO шукає Senior/Lead Data Scientist для роботи над прогнозними моделями в маркетингу. Ви будете вдосконалювати моделі, будувати fraud-detection систему та модель матчингу користувачів. Потрібен досвід 4+ роки в Data Science, Python, SQL, MLOps. Пропонується віддалена робота, сильна команда, 20 днів відпустки та бюджет на навчання.
Senior/Lead Data Engineer
Строить и поддерживать аналитическую инфраструктуру для продуктов с миллионами пользователей. Нужен опыт с BigQuery, dbt и event-based данными. Предлагают удаленку, обучение и сильную команду.
Старший инженер по искусственному интеллекту/машинному обучению
Разработка production-grade платформы для извлечения структурированных данных из PDF-документов любого качества. Требуется опыт работы с AWS Bedrock, OCR и RAG. Компания предлагает удаленную работу, гибкий график и оплачиваемое обучение.
Senior AI/ML Engineer
~3 170 171 – 4 079 872 ₸ оценка
Шукаємо Senior AI/ML Engineer з досвідом понад 3 роки для проектування та впровадження корпоративних AI-рішень. Потрібен експертний Python, deep learning та досвід з PyTorch/TensorFlow. Пропонуємо віддалену роботу, гнучкий графік та 28 днів відпустки.
Старший инженер данных (Data Engineer)
~3 170 171 – 4 079 872 ₸ оценка
Ищем старшего инженера данных для построения и оптимизации пайплайнов в глобальной аналитической платформе. Требуется 5+ лет опыта, уверенное владение Python и SQL, опыт с облаками (GCP/AWS) и хранилищами данных. Предлагается работа в международной компании из списка Fortune, удалёнка и интересные задачи.
Старший Data Engineer
~3 170 171 – 4 079 872 ₸ оценка
Старший Data Engineer для работы с высоконагруженной системой, где AI и LLM встроены в производственные потоки данных. Требуется опыт с Python, GCP, BigQuery, Spark, Iceberg, Kubernetes и PostgreSQL. Предлагается удаленная работа и активное использование AI-инструментов.