Инженер данных / Data Engineer
Разработка и поддержка ETL/ELT-пайплайнов и озера данных на базе Hadoop, проектирование и оптимизация хранилищ в PostgreSQL и ClickHouse, тонкая настройка Spark-расчётов. Требуется уверенный SQL, опыт с PostgreSQL, ClickHouse, Hadoop, Spark/Hive, инструментами оркестрации и базовый Python. Предлагают гибкий формат работы (офис, гибрид или удалённо по РФ), ДМС, обучение и конкурентную зарплату.
Отклик отправляется на сайте источника. Регистрация в Taylor для перехода не нужна.
Что предстоит делать
IT-компания GNIVC- партнер государственных компаний и лидеров российского бизнеса, разработчик и системный интегратор крупнейших государственных информационных систем, а также коммерческих решений для налогового мониторинга. • Компания входит в ТОП-100 лучших работодателей страны и на 9-м месте в категории «IT-компании» 2025 года по рейтингу работодателей hh среди крупных компаний • Мы в 25% лучших по уровню счастья среди компаний отрасли IT и России 2025 по версии Happy Job • У нас есть ИИ-песочница - среда для экспериментов и реальных проектов на современных опенсорс-больших языковых моделях. Здесь можно применять ИИ для оптимизации своей работы, автоматизации процессов и реализации собственных идей от гипотезы до результата • Являемся аккредитованной ИТ-компанией
- разработка и сопровождение процессов обработки данных;
- проектировать, разрабатывать и сопровождать ETL/ELT-процессы загрузки данных из источников в Озеро данных на базе Hadoop;
- разрабатывать и поддерживать пайплайны загрузки и трансформации данных, обеспечивать их стабильную работу и мониторинг;
- обеспечивать согласованность, полноту и качество данных на всех этапах жизненного цикла (сбор → хранение → трансформация → представление);
- работа с СУБД и хранилищами Проектировать и оптимизировать схемы хранения данных в PostgreSQL: таблицы, индексы, транзакции, процедуры;
- разрабатывать и сопровождать модели данных в ClickHouse: схемы таблиц, партиционирование, тиры хранения, материализованные представления;
- разрабатывать и сопровождать SQL-конфигурации для сборки цепочек событий процессов по задачам от аналитиков;
- заниматься тонкой настройкой тяжелых Spark-расчетов на кластере: искать узкие места через Spark UI, убирать лишние пересчеты и бороться с перекосами данных;
- поддерживать витрины данных для отчётов и аналитики заказчиков. Устранять узкие места производительности, выявлять и исправлять ошибки в данных;
- контролировать актуальность, корректность и доступность данных для потребителей;
- участвовать в проектировании архитектуры новых данных и хранилищ (ClickHouse, PostgreSQL, Elasticsearch) , выборе форматов и схем;
- Вести техническую документацию по схемам данных, процессам и регламентам. Соблюдать требования информационной безопасности и регламенты компании при работе с данными;
- автоматизировать рутинные операции по обработке и контролю данных. Участвовать в настройке мониторинга пайплайнов и своевременной реакции на сбои загрузки данных.
Что ждём от вас
- уверенное знание SQL (JOIN'ы, подзапросы, оконные функции, CTE, настройка планов выполнения);
- опыт работы с PostgreSQL: проектирование БД, оптимизация запросов, работа с индексами, транзакциями и нагрузкой;
- опыт работы с ClickHouse: моделирование таблиц, партиционирование, тиры хранения, оптимизация распределённых запросов;
- опыт работы с Озером данных на базе Hadoop: понимание архитектуры HDFS и форматов хранения (Parquet, ORC, Avro);
- опыт разработки ETL/ELT-процессов и пайплайнов данных;
- понимание принципов обработки больших данных и жизненного цикла данных (сбор → хранение → трансформация → предоставление);
- знакомство с Spark / Hive / HDFS на практическом уровне;
- опыт с инструментами оркестрации (Airflow, NiFi и т.п.). Знакомство с потоковой обработкой (Kafka, ClickHouse);
- базовое понимание Docker, Linux, Git. Опыт с BI-инструментами и витринами данных для аналитики. Навыки работы с Python (для скриптов обработки/автоматизации). Активно использовать ИИ-инструменты (ассистенты для написания и проверки кода) в повседневной работе;
- применять ИИ для ускорения рутинных задач: написание/рефакторинг SQL, генерация и проверка ETL-сценариев, объяснение ошибок. Владеть практикой промптирования: формулировать задачи для ИИ-ассистентов и критически проверять их выдачу;
- использовать ИИ для анализа данных и самопроверки результатов. Соблюдать требования информационной безопасности при работе с ИИ (не передавать чувствительные данные.
Что предлагаем
Стек и инструменты
Зарплата не указана — оценили по рынку
На основе 94 похожих вакансий за 90 дней.
Сколько платят вам?
Вакансии показывают, что обещают работодатели. Анонимно расскажите, сколько получаете вы как Data/ML-специалиста — так появится зарплата, которую платят на деле.
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Ещё в GNIVC
11 активных вакансий в компании
.NET-разработчик (Senior)
~1 391 000 – 2 703 284 ₸ оценка
Разработка и поддержка корпоративных приложений на .NET/C#: серверная часть с REST API и интеграциями, работа с Postgres, клиентские решения на WPF/WinForms и взаимодействие с React-фронтендом. Нужен опыт коммерческой разработки на .NET от 5 лет, знание .NET Framework 4.8, Postgres от 3 лет, понимание архитектурных паттернов и принципов SOLID/DDD. Предлагают гибкий формат работы (офис, гибрид или удалённо по РФ), ДМС, обучение и сертификацию за счёт компании, премии и дополнительные оплачиваемые выходные.
Java-разработчик (middle+)
~1 070 000 – 2 098 020 ₸ оценка
Разработка и поддержка высоконагруженного сервиса выгрузок и аккумулирования подписанных актов в компании GNIVC. Требуется опыт Java, Spring Boot, Kafka, JPA/Hibernate, unit-тестов, многопоточности и оптимизации запросов. Предлагают официальное трудоустройство, гибкий график (офис/гибрид/удалёнка), ДМС, обучение и премии.
Архитектор для платформы Observability
~2 126 718 ₸ оценка
Компания GNIVC ищет архитектора платформы Observability. Предстоит проектировать высоконагруженные распределённые системы сбора и обработки потоковых данных, разрабатывать архитектуру Observability, дорожную карту и документацию, а также контролировать решения команд. Нужен опыт проектирования отказоустойчивых систем, знание ClickHouse, Java, PostgreSQL, OpenSearch, Kafka, OpenTelemetry, Prometheus и других инструментов. Предлагают гибридный или удалённый формат, ДМС, обучение и конкурентную зарплату.
Java разработчик (backend)
Актуальность уточняется
~1 760 430 ₸ оценка
Ищем опытного Java-разработчика для работы над backend высоконагруженных государственных информационных систем. Нужно проектировать микросервисы, писать код на Java со Spring и Hibernate, оптимизировать SQL-запросы. Компания предлагает удаленную работу, ДМС, оплачиваемое обучение и премии.
Похожие вакансии
6 вакансий
ML-инженер (LLM)
~1 096 939 ₸ оценка
Разработка прикладных решений на базе open-source LLM: от прототипирования и выбора модели до адаптации, дообучения и интеграции в продуктовый контур. Нужен уверенный Python, опыт с FastAPI, PostgreSQL, LangChain/LangGraph, RAG-пайплайнами и инференс-фреймворками вроде vLLM. Предлагают 100% удалённую работу, технику от компании, обучение и прозрачный карьерный рост.
Python AI Automation Engineer
~1 096 939 ₸ оценка
Компания в сфере фудтеха ищет Python AI Automation Engineer, который будет внедрять ИИ-агентов и автоматизацию в операционные процессы бизнеса. Нужны уверенный Python, опыт работы с LLM API, LangChain/LangGraph, RAG, embeddings, tool calling и интеграции через REST API. Предстоит строить внутренние ИИ-сервисы, автоматизировать обработку заявок, документов и отчётности, работать с SQL, Docker и Git.
Аналитик ИИ платформы
~1 096 939 ₸ оценка
Нужен аналитик на проект ИИ-платформы для промышленного предприятия: сервис для обучения, развёртывания и мониторинга ML-моделей. Задача — собирать требования, писать ТЗ и ЧТЗ, описывать API и сценарии, ставить задачи разработчикам и сопровождать приёмку. Ждут опыта с ФТ/НФТ, BPMN/UML, понимания ML и микросервисов, плюсом — опыт в ML-проектах и работа с LLM. Обещают ДМС, обучение и технику для работы.
Руководитель направления развития риск-технологий / риск-технолог
~1 096 939 ₸ оценка
Нужен специалист для ведения полного цикла работ с системой принятия решений: анализ, разработка, тестирование и вывод в прод. Предстоит подключать новые источники данных, настраивать интеграции с БКИ, антифродом и CRM, разбирать инциденты и поддерживать документацию. Ждут опыт автоматизации риск-менеджмента или ИТ-процессов, знание SQL (PL/SQL, MsSQL, SAS) и высшее техническое или математическое образование. Предлагают оформление по ТК РФ, гибкий график 5/2, офис у м. Цветной Бульвар и ДМС.
Системний аналітик AI-рішень
~1 096 939 ₸ оценка по стеку
Системный аналитик AI-решений в UKRSIBTECH (банк UKRSIBBANK, группа BNP Paribas). Нужно формализовать требования к AI/ML-продуктам: FRD/SRS, API-контракты, BPMN/UML-модели, acceptance criteria в Gherkin, требования к LLM/RAG и Azure AI. Ждут 3+ года опыта в системном анализе, SQL, понимание AI/ML и банковского compliance (EU AI Act, GDPR, DORA). Предлагают стабильную работу в банке, медстраховку, 25 дней отпуска, обучение и частичную удалёнку.
AI / Data Science Engineer
~1 096 939 ₸ оценка по стеку
Компания Quantum ищет AI / Data Science Engineer для разработки AI-решений на базе LLM и NLP для анализа глобальных акций. Нужен опыт в Data Science/ML от 3 лет, сильный Python, работа с LLM/NLP, Deep Learning фреймворками и Docker. Предлагают удалённую работу с гибким графиком, оплачиваемый отпуск и участие в международных конференциях.