Data Engineer / Big Data Engineer
Компания 2ГИС строит корпоративную дата-платформу нового поколения и ищет Data Engineer для разработки MVP с нуля и миграции пайплайнов с Hadoop на Spark, Kafka, S3 и ClickHouse. Нужен опыт 3+ лет в Data Engineering, глубокое знание Spark и ClickHouse, работа с высоконагруженной Kafka и одним из языков (Python или Scala). Предлагают удалёнку или офисы в Москве, СПб и Новосибирске, белую зарплату, ДМС и поддержку профессионального развития.
Отклик отправляется на сайте источника. Регистрация в Taylor для перехода не нужна.
Зарплата не указана — оценили по рынку
На основе 16 похожих вакансий за 90 дней, рынок — СНГ (RUB); город вакансии не учтён.
Что предстоит делать
Навыки: SQL, Apache Spark, ClickHouse. Специализации: Инженер по данным. Мы строим корпоративную дата‑платформу следующего уровня — новый сервис с амбициозной задачей: трансформировать наработки компании в единое стандартизированное решение для работы с данными. Отказываемся от легаси, проектируем архитектуру заново, сохраняем лучшее (например, Apache Spark) и постепенно переносим существующие пайплайны на новую платформу. Начинать с нуля — не значит «с чистого листа». Это возможность заложить фундамент, который будет надёжным, масштабируемым и понятным десяткам инженерных команд. Именно сейчас мы переопределяем техстек, архитектурные подходы и процессы — и сейчас у тебя есть шанс поучаствовать в запуске платформы, куда будут стекаться все корпоративные данные. ## Что предстоит делать - Разрабатывать с нуля MVP новой дата‑платформы и инфраструктуры для ingest/transform. - Мигрировать существующие пайплайны с Hadoop/HDFS на новую архитектуру (S3, Kafka, Spark, ClickHouse). - Работать с большими объёмами данных и высоконагруженными Kafka‑топиками. - Строить отказоустойчивые пайплайны обработки и доставки данных. - Участвовать в архитектурных решениях, внедрять best practices хранения, мониторинга и качества данных. - Проектировать витрины данных под продуктовую и управленческую аналитику (OLAP). - Сопровождать миграцию BI‑отчётов на новую платформу (например, DataLens, Power BI). ## Почему это интересно - Ты действительно будешь создавать платформу с нуля — не просто настраивать Airflow, а проектировать архитектуру верхнего уровня с безопасностью, мониторингом и многопользовательской нагрузкой. - Влияешь на технологический курс всей компании: твои решения будут использовать десятки команд. - Работаешь с современным стеком: Spark 3+, Kafka, S3, ClickHouse и BI‑инструментами. - Сможешь реализовать технические решения, которые трудно внедрить в рамках существующих подходов. - Решаешь серьёзные инженерные задачи: миграция с Hadoop, масштабируемость, отказоустойчивость и строгие SLA по доставке данных. ## Мы будем рады специалисту, который - Имеет 3+ лет опыта на позиции Data Engineer / Big Data Engineer. - Хорошо понимает, как работает Spark и умеет его готовить. - Работал с ClickHouse и знает, как «выжать» из него максимум. - Имеет опыт работы с высоконагруженной Kafka (десятки / сотни тысяч событий в секунду). - Знаком с построением дата‑архитектуры (DWH, Lake, OLAP, ETL/ELT, Data Governance). - Умеет проектировать пайплайны под отказоустойчивость. - Хорошо владеет одним из языков программирования (например, Python или Scala). - Знает SQL и может читать логику отчётов без боли. Плюсом будут - Опыт построения дата‑платформ (Self‑Service инструменты и процессы). - Знание инструментов мониторинга и автоматического контроля качества данных (Data Quality, Data Contracts). - Опыт построения Data Lineage и работы с Data Catalog. - Инфраструктурный опыт: Docker, Kubernetes, CI/CD. ## Как мы работаем - Не боимся убирать легаси — осознанно избавляемся от устаревших решений. - Оцениваем эффективность не по объёму кода, а по бизнес‑ценности. - Любим, когда инженер предлагает нестандартные, но обоснованные решения. - Считаем, что архитектура важна только тогда, когда её понимают — human‑friendly документация обязательна. - Умеем договариваться — и с бизнесом, и друг с другом. ## Что мы предлагаем - 2ГИС — аккредитованная IT‑компания. - Можно работать удалённо или в офисах (Москва, Санкт‑Петербург, Новосибирск) — главное результат, а не локация. - Полностью «белая» зарплата . - Заботимся о здоровье: ДМС, онлайн‑консультации терапевта, невролога, психолога и медицинского агента. - Поддерживаем развитие: учебный центр, курсы, тренинги и книги для прокачки скиллов. - Если хочешь делиться опытом — поможем с выступлениями на конференциях и публикациями на Хабре.
Стек и инструменты
Сколько платят вам?
Анонимно укажите, сколько вы получаете как Data/ML-специалист, — сразу покажем, в скольких вакансиях платят меньше. А из ответов сложится зарплата, которую платят на деле, а не обещают.
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Ещё в 2GIS
38 активных вакансий в компании
QA-инженер
~599 500 – 1 090 000 ₸ оценка по стеку
2ГИС ищет QA-инженера в команду Сервиса Транспорта — тестировать бэкенд вручную и на собственных утилитах, писать тест-кейсы и чек-листы, участвовать в релизах и частично автоматизировать тесты на Python. Нужен опыт тестирования бэкенда от трёх лет, знание клиент-серверной архитектуры, Unix, CI/CD, Git и инструментов вроде Kibana, Kafka и Grafana. Можно работать удалённо, предлагают ДМС, поддержку в выступлениях и внутренние хакатоны.
Platform Backend Services (Golang)
~1 362 500 – 1 651 350 ₸ оценка по стеку
Разработка и поддержка высоконагруженных бэкенд-сервисов для мобильных приложений 2ГИС: серверы обновлений, интеграции с командами мобильных клиентов, доставка через CI/CD в Kubernetes в несколько дата-центров. Нужен опыт бэкенд-разработки от 5 лет, из них на Go от 4 лет, знание SQL/NoSQL и брокеров сообщений. Предлагают удалёнку из любой локации, белую зарплату, ДМС, технику на выбор и обучение.
Дизайнер бренд-системы
~749 375 ₸ оценка по стеку
Нужен дизайнер, который разберётся в существующем стиле 2ГИС, найдёт пробелы и противоречия и соберёт целостную бренд-систему с гайдлайнами и правилами. Требуется опыт в брендинге и айдентике от 3 лет, системное мышление и умение договариваться. Предлагают белую зарплату, ДМС, офис или удалёнку из любого города России.
Golang-разработчик
~1 362 500 – 1 651 350 ₸ оценка по стеку
Разработка высоконагруженного бэкенда на Go для социального графа 2ГИС: публичный профиль, связи между пользователями, алгоритмы поиска друзей и уведомления. Нужен опыт от 4 лет на Go, знание Kafka и SQL/NoSQL, умение писать быстрый и безопасный код. Предлагают удалёнку, белую зарплату, ДМС, обучение и сильную команду Golang-разработчиков.
Похожие вакансии
6 вакансий
Software Engineer (Apache Superset)
~1 500 000 – 2 887 500 ₸ оценка по стеку, все рынки
Нужен инженер для развития и кастомизации корпоративной BI-платформы на базе Apache Superset: писать собственные visualization plugins, дорабатывать frontend и backend, поддерживать production. Требуется 5+ лет опыта в software/BI engineering, уверенный Python, JavaScript/TypeScript с React, SQL, а также Kubernetes, Docker и Helm. Работа в SoftServe с гибким графиком (удалённо, офис или гибрид), медстраховкой и оплачиваемым отпуском.
Staff Data Scientist
~1 500 000 – 2 887 500 ₸ оценка по стеку, все рынки
Компания Robots & Pencils ищет Staff Data Scientist для построения и вывода в продакшн моделей машинного обучения и GenAI под задачи клиентов. Нужен опыт 5+ лет в data science и прикладном ML, глубокое знание Python, статистики и деплоя моделей, плюс менторство джуниоров и работа с бизнес-заказчиками. Предлагают гиг-контракт, оплачиваемый отпуск, медстраховку и полностью удалённый формат.
Старший AI инженер
~1 500 000 – 2 887 500 ₸ оценка по всем рынкам
Ищем старшего AI-инженера для развития корпоративной агентной AI-платформы и Studio AI. Нужно определять AI-стратегию, проектировать архитектуру систем на базе ML, NLP и LLM, работать с Azure, Kubernetes, PyTorch, TensorFlow и LangChain. Требуется глубокий опыт в продакшн-AI и английский уровня Upper-Intermediate.
Data Infrastructure Engineer
~1 500 000 – 2 887 500 ₸ оценка по всем рынкам
Стартап из Израиля строит AI-платформу для автономного управления data lakehouse на Apache Iceberg. Нужен инженер с 5+ годами разработки на Java, сильным Rust и опытом data-инфраструктуры, PostgreSQL и Kubernetes. Работа удалённая, гибкий график, оплачиваемый отпуск и поддержка контракторов.
Data Scientist (RecSys)
~1 226 250 – 1 558 700 ₸ оценка по стеку
Команда RecSys в 2ГИС ищет Data Scientist для развития рекомендательных сервисов: рекомендации заведений на карте, поиск по категориям и персональные подборки. Нужен опыт от 3 лет в DS/ML, не менее 2 лет с рекомендательными системами, уверенный Python и SQL, DL-фреймворки и понимание production-разработки. Предлагают удалёнку по РФ или гибрид в офисах Москвы, Санкт-Петербурга и Новосибирска, сложный и интересный домен и современный ML-стек.
Специалист по оценке ML-задач
Нужно придумывать и оценивать сложные задачи для проверки моделей машинного обучения, опираясь на глубокую экспертизу в своей области. Работа в международной команде над бенчмарками и улучшением современных AI-систем. Формат удалённый, конкретные требования к опыту и зарплата не указаны.