Data Engineer
Команда Data Engineering ищет инженера для развития Market Data Platform — lakehouse-инфраструктуры на Apache Iceberg поверх AWS S3, которая обслуживает исследования, бэктестинг и торговлю в реальном времени. Нужно строить batch- и streaming-пайплайны на Airflow, Spark и dbt, развивать сбор и нормализацию биржевых данных, писать внутренние библиотеки и отвечать за мониторинг и CI/CD в Kubernetes. Требуется 5+ лет опыта с системами обработки данных, сильный Python, продвинутый SQL и английский от B2; работа полностью удалённая с пересечением по Москве 12:00–18:00, компенсируются страховка, спорт и обучение.
Отклик отправляется на сайте источника. Регистрация в Taylor для перехода не нужна.
Зарплата не указана — оценили по рынку
На основе 101 похожей вакансии за 90 дней по всем рынкам вместе — отдельной выборки по рынку этой вакансии нет.
Что предстоит делать
Команда Data Engineering отвечает за Market Data Platform — lakehouse-инфраструктуру, которая покрывает весь путь данных: от сырых биржевых фидов до надёжного хранилища петабайтного масштаба для исследований, бэктестинга и торговли в реальном времени. Опыт работы с биржевыми данными не обязателен: ключевое для нас — сильная экспертиза в lakehouse-системах. Доменный контекст команда даст сама.
- Развивать lakehouse на Apache Iceberg over AWS S3: партиционирование и сортировка данных, эволюция схемы, snapshots, time travel, compaction, TTL, point-in-time correctness для reference data. Оптимизировать производительность запросов и стоимость хранения.
- Строить batch- и streaming-пайплайны на Airflow, Spark и dbt для tick data и reference data.
- Развивать сбор и нормализацию market data: биржевые фиды (PCAP, multicast UDP, ITCH, FIX) и данные провайдеров (OneTick, Refinitiv, Bloomberg, ICE), реконструкция L2/L3 order book, обработка пропусков и сверка данных.
- Разрабатывать внутренние библиотеки и единый слой доступа к данным (Spark, Polars): управление схемами, data contracts, валидация, lineage.
- Отвечать за мониторинг, алертинг, SLAs/SLOs и CI/CD на Kubernetes / EKS.
Что ждём от вас
- 5+ лет опыта разработки систем обработки данных в продакшене
- Практический опыт работы с крупными data lake / lakehouse-системами и понимание типичных проблем их эксплуатации
- Опыт работы с Apache Iceberg или аналогичными табличными форматами (Delta, Hudi): партиционирование, эволюция схемы, snapshots, compaction, работа с каталогом.
- Понимание внутреннего устройства Spark и Iceberg и опыт построения пайплайнов end-to-end, а не только работы поверх готовых фреймворков.
- Сильный Python, включая опыт с Polars и/или PySpark.
- Понимание Apache Arrow и колоночных форматов данных.
- Опыт с Airflow и Apache Spark или аналогичными системами оркестрации и распределённой обработки.
- Продвинутый SQL: сложные агрегации, оконные функции, оптимизация запросов, partition pruning.
- Уверенное знание Linux, практический опыт с Docker, Kubernetes/ EKS, AWS S3.
- Понимание принципов хранения и оптимизации структурированных, неструктурированных и бинарных данных: партиционирование, сжатие, управление стоимостью.
- Английский от B2 — для работы с документацией и общения с международной командой.
- Будет плюсом:
- Опыт с market data или network packet capture: PCAP, ITCH, FIX/FAST, multicast UDP, реконструкция order book, time-series data.
- Опыт нормализации market data из нескольких источников (OneTick, Refinitiv/Reuters, Bloomberg, ICE) в единую схему данных и symbology.
- Опыт со StarRocks или другими аналитическими query engines.
- Опыт с Terraform, ArgoCD, Grafana, Prometheus.
- Знание Rust или опыт его использования для high-performance capture/decoding.
Что предлагаем
Стек и инструменты
Сколько платят вам?
Анонимно укажите, сколько вы получаете как Data/ML-специалист, — сразу покажем, в скольких вакансиях платят меньше. А из ответов сложится зарплата, которую платят на деле, а не обещают.
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Ещё в Advantage Solutions
2 активные вакансии в компании
Data Engineer
~2 264 550 ₸ оценка по всем рынкам
Команда Data Engineering ищет инженера для развития Market Data Platform — lakehouse-инфраструктуры на Apache Iceberg и AWS S3, которая обрабатывает биржевые данные петабайтного масштаба. Нужен сильный опыт в lakehouse-системах, Spark, Airflow, Python и SQL, а также уверенное владение Kubernetes и AWS. Работа полностью удалённая с пересечением с командой по Москве, предлагают компенсацию страховки, спорта и обучения.
Похожие вакансии
6 вакансий
Старший AI архитектор
~2 264 550 ₸ оценка по всем рынкам
Нужен старший архитектор AI для проектирования безопасных AI-решений и агентных workflow на Microsoft Azure для клиентов из финансового сектора. Требуется 10+ лет опыта в архитектуре, практика с Azure AI Foundry, RAG, интеграциями и уверенный Python для ревью кода. Роль hands-on с лидерством инженеров и клиентов, полностью удалённо из Украины.
Старший AI Solutions Architect / Forward-Deployed AI инженер
~2 264 550 ₸ оценка по всем рынкам
Нужен старший инженер/архитектор AI-решений в центральную команду Data & AI глобального энтерпрайза: общаешься с бизнесом, проектируешь и сам собираешь решения на LLM (Gemini, Claude, GPT) поверх Google Cloud, сочетая детерминированную автоматизацию с вероятностным AI. Первый фокус — финансы и налоговый комплаенс, включая классификацию документов и AI-аналитику. Требуют сильный software engineering, опыт интеграции LLM в бизнес-процессы, работу со стейкхолдерами и свободный английский; предлагают долгий контракт 12+ месяцев, удалёнку и оплату обучения.
ML Engineer (Computer Vision)
~2 264 550 ₸ оценка по всем рынкам
Andersen ищет ML-инженера по Computer Vision для проекта платформы анализа изображений: нужно автоматизировать поиск дефектов и контроль качества в гальванике и обработке поверхностей. Основная работа — модели семантической сегментации и классификации изображений, извлечение признаков, подготовка датасетов и валидация результатов по оценкам экспертов. Требуют 5+ лет в ML/DS, из них 3+ года в CV, уверенный Python и OpenCV, PyTorch или TensorFlow, английский от Intermediate+. Предлагают полностью удалённую или гибридную работу, бонусы, страховку и обучение.
Старший аналитик данных в iGaming
~1 698 413 – 3 396 825 ₸ оценка
Ищем опытного старшего аналитика данных для партнёра в сфере iGaming (онлайн-казино). Нужно глубоко разбираться в экономике казино (GGR/NGR, retention, монетизация), владеть продвинутым SQL, статистикой и уметь самостоятельно находить причины колебаний KPI. Обязателен опыт 5+ лет в аналитике и несколько лет работы с real-money B2C онлайн-казино; предлагают удалённую работу с сильным влиянием на бизнес-решения.
Инженер компьютерного зрения (Visual Place Recognition)
~2 264 550 ₸ оценка по всем рынкам
Farsight Vision — эстонско-украинская defense-tech компания, которая делает цифровые 2D/3D-двойники местности по аэросъёмке для работы в условиях без GNSS. Нужен инженер компьютерного зрения, который возьмёт на себя Visual Place Recognition: обучение и деплой моделей, retrieval-пайплайны, устойчивость к смене ракурса, освещения и сезонов. Требуют 3+ года в CV/Deep Learning, сильный Python и PyTorch, опыт с VPR и ANN-поиском; предлагают гибкий график, оплачиваемый отпуск и больничные, но с обязательной проверкой безопасности (нельзя иметь связей с РФ/Беларусью).
Python-разработчик (Data Engineering)
~2 264 550 ₸ оценка по всем рынкам
Команда CVM B2B в МТС Web Services ищет опытного Python-разработчика для работы на стыке бэкенда и дата-инжиниринга. Нужно проектировать архитектуру ETL/ELT-пайплайнов, строить сквозные потоки данных в PostgreSQL и ClickHouse, настраивать мониторинг качества данных и развивать интеграции в DataLake. Требуется от 5 лет коммерческой разработки на Python, уверенный SQL и опыт с Airflow, Spark, ClickHouse и большими данными. Предлагают ДМС с первого месяца, корпоративное обучение, конференции и внутреннюю облачную платформу.