Разработчик Big Data (Java/Scala)
Ищем опытного разработчика Big Data для крупного проекта: делать и поддерживать ETL и потоковые пайплайны на Spark (Java/Scala), работать с Hadoop, Kafka и SQL. Нужен опыт 5+ лет в разработке, включая 2–3 года в Big Data. Предлагают гибкий формат работы, ДМС, обучение и премии.
География удалёнки не уточнена
Уточните у работодателя, из каких стран можно работать.
Отклик отправляется на сайте источника. Регистрация в Taylor для перехода не нужна.
Что предстоит делать
IT-компания GNIVC - партнер государственных компаний и лидеров российского бизнеса, разработчик и системный интегратор крупнейших государственных информационных систем, а также коммерческих решений для налогового мониторинга. • Компания входит в ТОП-100 лучших работодателей страны и на 9-м месте в категории «IT-компании» 2025 года по рейтингу работодателей hh.ru среди крупных компаний; • Мы в 25% лучших по уровню счастья среди компаний отрасли IT и России 2025 по версии Happy Job; • У нас есть ИИ-песочница - среда для экспериментов и реальных проектов на современных опенсорс-больших языковых моделях. Здесь можно применять ИИ для оптимизации своей работы, автоматизации процессов и реализации собственных идей от гипотезы до результата; • Являемся аккредитованной ИТ-компанией. Мы ищем опытного разработчика для проектов по обработке больших данных с потенциалом роста до тимлида в части bigdata. В задачи входит разработка и поддержка распределённых процессов обработки данных на базе Apache Spark (Java/Scala) с интеграцией в экосистему Hadoop (HDFS, Hive, HBase), а также взаимодействие с системами Oracle/Postgres и потоковыми данными через Kafka. Работа ведётся в кластере ADH.
- разработка и поддержка Big Data на крупном проекте;
- разработка и сопровождение ETL-процессов и потоковых пайплайнов на Spark (Java/Scala);
- интеграция с источниками и хранилищами данных: HDFS, Hive, HBase, Oracle, Postgres, Kafka, ClickHouse;
- написание SQL-запросов;
- оптимизация производительности Spark job’ов и процессов загрузки/выгрузки;
- участие в проектировании архитектуры и внедрение лучших практик разработки под Big Data;
- оптимизация производительности на уровне кластера (тюнинг Spark, partitioning, broadcasting).
Что ждём от вас
- опыт коммерческой разработки на Java и Scala: 5+ лет опыта разработки, из них 2–3 года в Big Data;
- практический опыт работы с Apache Spark;
- знание экосистемы Hadoop (HDFS, Hive, HBase);
- опыт работы с Kafka;
- хорошее знание SQL;
- опыт работы с реляционными СУБД;
- уверенное владение Linux;
- глубокое понимание Spark internals (RDD/DataFrame API, shuffle, Catalyst Optimizer);
- опыт оптимизации производительности;
- понимание принципов распределённых систем (HDFS, Zookeeper, YARN);
- опыт взаимодействия с бизнес-заказчиками/аналитиками (умение переводить требования в архитектуру решения).
Что предлагаем
Стек и инструменты
Зарплата не указана — оценили по рынку
На основе 105 похожих вакансий за 90 дней.
Сколько платят вам?
Вакансии показывают, что обещают работодатели. Анонимно расскажите, сколько получаете вы как Data/ML-специалиста — так появится зарплата, которую платят на деле.
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Ещё в GNIVC
10 активных вакансий в компании
Java-разработчик (middle+)
~1 372 483 ₸ оценка
Разработка и поддержка высоконагруженного сервиса выгрузок и аккумулирования подписанных актов в компании GNIVC. Требуется опыт Java, Spring Boot, Kafka, JPA/Hibernate, unit-тестов, многопоточности и оптимизации запросов. Предлагают официальное трудоустройство, гибкий график (офис/гибрид/удалёнка), ДМС, обучение и премии.
География удалёнки не уточнена
Архитектор для платформы Observability
~2 254 590 ₸ оценка
Компания GNIVC ищет архитектора платформы Observability. Предстоит проектировать высоконагруженные распределённые системы сбора и обработки потоковых данных, разрабатывать архитектуру Observability, дорожную карту и документацию, а также контролировать решения команд. Нужен опыт проектирования отказоустойчивых систем, знание ClickHouse, Java, PostgreSQL, OpenSearch, Kafka, OpenTelemetry, Prometheus и других инструментов. Предлагают гибридный или удалённый формат, ДМС, обучение и конкурентную зарплату.
География удалёнки не уточнена
Java разработчик (backend)
~1 764 165 ₸ оценка
Ищем опытного Java-разработчика для работы над backend высоконагруженных государственных информационных систем. Нужно проектировать микросервисы, писать код на Java со Spring и Hibernate, оптимизировать SQL-запросы. Компания предлагает удаленную работу, ДМС, оплачиваемое обучение и премии.
География удалёнки не уточнена
Инженер данных (ETL/ELT, Hadoop, ClickHouse)
~1 385 800 ₸ оценка
Инженер данных в IT-компанию GNIVC: разработка ETL/ELT-процессов, работа с Hadoop, ClickHouse, PostgreSQL, Spark. Требуется уверенный SQL, опыт с большими данными и пайплайнами. Предлагают удаленку или гибрид, ДМС, обучение и конкурентную зарплату.
География удалёнки не уточнена
Похожие вакансии
6 вакансий
Data Engineer
~2 017 980 ₸ оценка
VK Музыка ищет data-инженера, который займётся миграцией на целевую архитектуру данных и построением ETL-процессов для продуктовой аналитики. Нужны уверенные Python, SQL, Airflow и ClickHouse плюс 4+ года опыта в разработке или data engineering, включая работу с DWH объёмом от 100 ТБ. Плюсом будет опыт с YTsaurus.
География удалёнки не уточнена
Инженер по инфраструктуре LLM / MLOps-инженер
~2 017 980 ₸ оценка
Нужен инженер, который развернёт и будет эксплуатировать корпоративный LLM-сервис в закрытом контуре: серверы инференса vLLM/SGLang на GPU, шлюз LiteLLM с правами доступа и квотами, мониторинг Prometheus/Grafana, а также RAG-слой над кодом и документацией. Ждут реального опыта вывода моделей в прод с пользователями и дежурством, уверенного Linux/Docker/CUDA, инфраструктуры как кода и Python для автоматизации, плюс осторожность с утечками секретов и персональных данных. Предлагают удалёнку, график 5/2, мощный ноутбук, оплату больничных и скидку на английский; зарплата обсуждается по итогам интервью.
География удалёнки не уточнена
Специалист по интеграции данных
~2 017 980 ₸ оценка по стеку
Нужен специалист по интеграции данных в AI-платформу для управления недвижимостью: проектировать и поддерживать пайплайны данных между микросервисами, IoT-датчиками, сторонними FM-платформами и внешними API. Главное — 4+ года опыта в data-инжиниринге или интеграциях, уверенный Python, Azure Databricks с Delta Lake/Lakehouse, моделирование данных и событийные архитектуры, английский от Upper-Intermediate. Предлагают полностью удалённую работу (или офис во Львове), конкурентную зарплату, бюджеты на обучение и wellness.
География удалёнки не уточнена
Разработчик баз данных MS SQL Server
~2 017 980 ₸ оценка
Нужен опытный разработчик баз данных на MS SQL Server 2019 — предстоит разрабатывать и сопровождать БД брокерской системы, писать запросы на T-SQL и работать с индексами, блокировками и оптимизатором. Ждут минимум 5 лет практики с SQL Server, плюсом будут Git, проект БД в Visual Studio и понимание CI/CD. Работа полностью удалённая, в аккредитованной ИТ-компании Bell Integrator (ГК Softline) с проектами для крупных банков, телекома и ритейла.
География удалёнки не уточнена
Senior Data Engineer
~2 017 980 ₸ оценка
Позиция Senior Data Engineer в Flowwow — международном маркетплейсе подарков. Нужно развивать собственную Data Platform на базе lakehouse (Apache Iceberg, Trino, Spark, Airflow, Kafka) и писать библиотеки на Python. Требуется 5+ лет опыта в data engineering или backend, глубокое знание Python, lakehouse-стека и Airflow. Предлагают работу с AI-агентами, mentoring и развитие платформенных инструментов.
География удалёнки не уточнена
ML-разработчик
~2 017 980 ₸ оценка
Ищем ML-разработчика в проект по защите от DDoS и сетевых атак. Нужно вести ML-решения от анализа данных и разметки датасетов до внедрения и контроля в проде, уверенно владеть Python и Linux. Предлагают удалёнку из любой точки мира, официальное трудоустройство, ДМС и компенсацию обучения и спорта.
География удалёнки не уточнена