Перейти к содержимому

Разработчик ETL

Разработка и поддержка корпоративного движка потоковой обработки данных на Apache Flink для банка ТОП-3. Нужен опыт Data Engineer или разработчика от 3 лет, знание Java/Scala, Flink, Kafka, Kubernetes, Prometheus/Grafana. Предлагают ДМС, технику, обучение и митапы.

senior удалённо ~2 743 310 ₸
salary intelligence

Зарплата не указана — оценили по рынку

На основе 94 похожих вакансий за 90 дней.

оценка p25–p75
1 439 100 – 3 778 750 ₸
медиана: 2 743 310 ₸
Хотите увидеть распределение по грейдам и городам? Зарплаты Data/ML Калькулятор зарплат
Вакансии в Telegram-канале
Свежие вакансии Каждый день
Подписаться
??%
Match Score
Войдите и создайте резюме
Войти
описание

Что предстоит делать

Проект банка ТОП-3! Команда создает и развивает корпоративный движок потоковой обработки данных на основе Apache Flink, который используется разработчиками банка для построения приложений обработки данных в реальном времени (фрод-мониторинг, скоринг, обогащение транзакций, расчеты). Вы будете работать в команде, которая отвечает за фреймворк и платформенные возможности Flink! Твои задачи: • Разрабатывать и поддерживать коннекторы для интеграции Flink с корпоративными системами хранения данных (Kafka, S3-совместимые объектные хранилища, HBase, возможно Fluss) и аналитическими СУБД • Реализовывать механизмы Stateful обработки: настраивать и оптимизировать State Backends (RocksDB, Heap), интегрировать с внешними хранилищами состояний для сценариев соединения с большими справочниками • Разрабатывать инфраструктурные решения для повышения отказоустойчивости: реализовывать механизмы checkpointing, savepoints, автоскейлинга, восстановления после сбоев, поддерживать High Availability кластеров • Интегрировать Flink-приложения с корпоративными системами: обеспечивать аутентификацию, работать с секрет-менеджерами, системами логирования (ELK), метриками (Prometheus/Grafana), Единым аудитом • Настраивать и поддерживать систему мониторинга Flink-кластеров и джобов: отслеживать метрики JVM, backpressure, checkpoint durations, consumer lag, watermarks • Разрабатывать и внедрять процессы управления жизненным циклом приложений (деплой, апгрейд, остановка, откат) через CI/CD и специализированный корпоративный портал управления сервисами • Проводить нагрузочное тестирование, анализировать узкие места производительности, оптимизировать latency и throughput потоковых конвейеров • Реализовывать и поддерживать Flink History Server для анализа завершенных заданий и диагностики Что мы ждем от тебя: • Опыт работы Data Engineer или разработчиком от 3 лет, из них не менее 2 лет в области потоковой обработки данных (Apache Flink, Kafka Streams, Spark Streaming) или Big Data • Уверенное знание Java (или Scala) и опыт разработки production-ready приложений в распределенных системах • Практический опыт работы с Apache Flink: понимание концепций операторов, state, checkpointing, savepoints, exactly-once семантики, роли JobManager/TaskManager • Опыт работы с Kafka: продюсеры, консьюмеры, топологии, управление offset'ами, обработка ошибок • Опыт работы с системами контейнеризации и оркестрации: Docker, Kubernetes (Pods, Deployments, Services, ConfigMaps, Operators) • Знание принципов работы систем мониторинга: Prometheus, Grafana. Умение настраивать алерты и интерпретировать метрики • Продвинутый уровень SQL, опыт оптимизации запросов и работы с технической документацией (RFC, официальная docs) • Навыки декомпозиции сложных задач, отличные коммуникационные навыки для работы с техническими командами (разработчики, DevOps) и потребителями (data-инженеры) Будет плюсом: • Опыт разработки собственных коннекторов или форматов данных для Flink. • Знание экосистемы Hadoop/Big Data: HDFS, HBase, Hive. Понимание принципов работы с объектными хранилищами (S3) • Опыт работы с системами логирования и трассировки: ELK (Elasticsearch, Logstash, Kibana), Jaeger/Zipkin • Понимание принципов Data Lineage и опыт интеграции с инструментами линии происхождения данных • Опыт работы с SQL-интерфейсами Flink (Table API/SQL) и интеграцией с корпоративными BI-системами • Знакомство с проектами Apache Paimon, Apache Iceberg, Fluss или аналогичными технологиями Lakehouse Что мы обеспечиваем: • Внутренние семинары, митапы, мы очень любим учиться новому • ДМС со стоматологией для сотрудников и скидку на покупку ДМС для ближайших членов семьи • Технику для комфортной работы • Сессии профессионального развития персонала, результатом которой является план индивидуального развития каждого сотрудника

навыки

Стек и инструменты

Поделиться

Подходит ли вам эта вакансия?

Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть

Создать аккаунт PDF-парсинг резюме за 2 минуты

Ещё в Лига Цифровой Экономики

21 активная вакансия в компании

4 д. назад

Инженер по тестированию (QA)

~799 500 ₸ оценка

Тестировщик в команду банковского продукта — альтернативной СУБД для импортозамещения. Нужно строить тестовую модель, писать автотесты на Python (pytest, Selenium/Playwright), тестировать API, web и AI-агентов, работать с CI/CD и мониторингом. Требуется опыт коммерческой автоматизации на Python, знание SQL, REST, Kafka и понимание LLM/RAG. Предлагают ДМС, технику, обучение и менторство.

QA Python pytest +19
middle удал. hh
6 д. назад

Fullstack QA инженер

~799 500 ₸ оценка

Ищем Fullstack QA инженера для ручного и автоматизированного тестирования систем дистанционного банковского обслуживания. Нужен опыт тестирования банковских продуктов, знание SQL и REST API, умение писать автотесты на Java. Предлагают удаленную работу, современный стек и возможности для профессионального роста.

QA автотесты Java +9
middle удал. hh
2 нед. назад

Автотестировщик Java

~799 500 – 1 599 000 ₸ оценка

Вакансия автотестировщика Java в команду Сбера, работающую над универсальным интерфейсом для корпоративных систем с использованием AI-технологий. Нужен опыт функционального тестирования от 3 лет и автотестирования на Java от 2 лет, знание REST API и инструментов тестирования. Предлагают удаленную работу, технику и ДМС.

Java автотестирование REST API +6
senior удал. hh
2 нед. назад

Инженер по автоматизации тестирования (QA Automation)

~799 500 ₸ оценка

Ищем инженера по автоматизации тестирования для разработки data cloud-платформы в крупном банке. Нужен опыт от 1 года в автоматизации, знание Java или Python, PostgreSQL, Kafka и API. Предлагают ДМС, технику и возможности для профессионального роста.

QA Automation Java +6
middle удал. hh

Похожие вакансии

6 вакансий
Itransition
I
Itransition
9 ч. назад

Инженер Computer Vision / ML

~2 743 310 ₸ оценка

Проект по рентгеновскому контролю лопастей ветрогенераторов ищет инженера CV/ML в команду из двух человек: вы отвечаете за разметку данных, реализацию и тесты правил детекции дефектов, воспроизводимые пакетные пайплайны, метрики и инструмент для проверки находок экспертом. Нужны 3+ года в computer vision или прикладном ML с реальными изображениями, уверенный Python (NumPy, OpenCV, pandas), опыт работы с огромными изображениями (тайлинг и сохранение координат), аккуратная оценка качества и автотесты; опыт в рентгене не требуется — домену научат. Предлагают удалёнку, гибкий график, конкурентную оплату, компенсацию медицины и спорта, курсы английского и проекты для крупных заказчиков вроде PayPal, Philips и Toyota.

Computer Vision Machine Learning Image Processing +17
senior удал. hh
Itransition
I
Itransition
9 ч. назад

Инженер компьютерного зрения / ML

~900 000 – 1 500 000 ₸ оценка

Проект — proof of concept рентгеновской дефектоскопии лопастей ветрогенераторов: нужно писать на Python пайплайны обработки гигапиксельных снимков и правила детекции дефектов, вести разметку и давать честные метрики, а также сделать инструмент для проверки находок экспертом. Ждут 3+ года в computer vision / ML, уверенный Python (NumPy, OpenCV, pandas), опыт разметки, воспроизводимых пайплайнов и тестов, рабочий английский. Предлагают удалёнку, гибкий график, проекты для PayPal, Philips, Toyota и компенсации на медицину, спорт и обучение.

Computer Vision Machine Learning Python +14
senior удал. hh
Itransition
I
Itransition
9 ч. назад

Инженер Computer Vision / ML

~2 743 310 ₸ оценка

Проект на 6–8 месяцев по Computer Vision для рентгеновского контроля лопастей ветрогенераторов, с перспективой превратиться в продукт. От вас нужен Python (NumPy, OpenCV, pandas), опыт работы с большими изображениями (тайлинг, сшивка, сохранение координат), правильная оценка моделей, тесты и, главное, участие в разметке и проверке данных — опыт в рентгене не требуется, домену научат. Взамен предлагают удалённую работу, гибкий график, конкурентную оплату, медкомпенсацию, курсы английского, спорт и проекты для крупных зарубежных клиентов.

Computer Vision Machine Learning Python +11
senior удал. hh
Itransition
I
Itransition
9 ч. назад

Старший инженер Computer Vision (рентгеновская инспекция)

~2 743 310 ₸ оценка

Проект — proof of concept рентгеновской инспекции лопастей ветрогенераторов: нужно построить пайплайн классической обработки изображений, который находит тонкий металлический проводник внутри композита и определяет место обрыва, а также проверяет, можно ли достоверно детектировать дефекты клеевого соединения. Ждут 4+ года в Computer Vision и обработке изображений, сильный Python с NumPy, OpenCV и scikit-image, опыт работы с изображениями, не помещающимися в память, и постановки экспериментов, отделяющих ограничения съёмки от ограничений алгоритма. Опыт в рентгене и NDT не нужен — физике научат; предлагают конкурентную оплату, гибкий график, удалёнку, компенсацию медицины и English-курсы.

Computer Vision Image Processing Python +13
senior удал. hh
Itransition
I
Itransition
9 ч. назад

Старший инженер компьютерного зрения

~900 000 – 1 500 000 ₸ оценка

Нужен старший инженер компьютерного зрения, который возглавит команду из двух человек и сделает proof of concept рентгеновской инспекции лопастей ветряных турбин: искать разрыв тонкого металлического проводника внутри композита на огромных сшитых снимках и оценить, реально ли вообще увидеть дефекты клеевого соединения. Основная работа — классическая обработка изображений на Python (NumPy, OpenCV, scikit-image): нормализация по толщине, тайлинг, трассировка линейных структур, калибровка порогов; обучение применяется только там, где даёт выигрыш. Опыт в рентгене и NDT не нужен — важнее 4+ года в CV на реальных «грязных» данных, умение отличать промах алгоритма от отсутствия сигнала в снимке и хороший английский. Предлагают удалённую работу, гибкий график, оплату медицинских расходов, курсы английского и компенсацию спорта.

Computer Vision Image Processing Python +11
senior удал. hh
Itransition
I
Itransition
9 ч. назад

Старший инженер по компьютерному зрению (Computer Vision)

~2 743 310 ₸ оценка

Нужен старший инженер по компьютерному зрению, который возглавит команду из двух человек и построит метод анализа рентгеновских снимков лопастей ветрогенераторов: найти обрыв металлического проводника внутри композита и оценить, реально ли надёжно видеть дефекты клеевого соединения. Основной инструмент — классическая обработка изображений на Python (OpenCV, NumPy, scikit-image) плюс машинное обучение там, где оно доказанно помогает; опыт в рентгене и НРК не нужен, физике научат. Ждут 4+ года в computer vision на реальных данных, умение работать с огромными изображениями и ставить эксперименты, отличающие ограничения съёмки от ограничений алгоритма. Предлагают удалёнку, гибкий график, проекты для крупных заказчиков, компенсацию медицины и фитнеса, курсы английского.

Computer Vision Image Processing Python +16
senior удал. hh