Data Engineer (ETL-миграция)
Нужен сильный Data Engineer для миграции ETL-системы телеком-оператора с Oracle/Informatica на Apache стек (Airflow, NiFi, Kafka, Spark, Greenplum, S3). Требуется глубокий SQL, опыт миграции ETL, работа с Oracle PL/SQL, PostgreSQL, Greenplum/ClickHouse и проектирование пайплайнов на Spark/NiFi/Airflow. Проектная занятость через кадровое агентство Top Selection, уровень Senior.
Отклик отправляется на сайте источника. Регистрация в Taylor для перехода не нужна.
Эта вакансия платит больше рынка
На 16% выше медианы Data/ML по 67 вакансиям за 90 дней, рынок — СНГ (RUB); город и грейд вакансии не учтены.
Что предстоит делать
Навыки: Oracle PL/SQL, Высоконагруженные системы, PostgreSQL, Greenplum, ClickHouse, Apache Airflow, Apache Spark, Apache NiFi, Apache Kafka, Apache Hadoop. Квалификация: Senior. Специализации: Инженер по данным. Привет! Меня зовут Марина. 👋 Я представляю группу компаний Top Selection. Мы занимаемся трудоустройством IT специалистов на проектную занятость. На данный момент мы в поиске сильного **Data Engineer (ETL-миграция)** для участия в миграции ИС на Apache стек. ✅ **Требования** ● Опыт миграции ETL-систем (желательно с Oracle/Informatica на Apache стек) ● Глубокий SQL: оконные функции, сложные джойны, иерархические запросы ● Оптимизация SQL для highload (партиционирование, индексы, explain plans) ● Oracle (PL/SQL) и PostgreSQL ● Greenplum и/или Clickhouse ● Проектирование архитектур на Apache Spark (PySpark), NiFi, Airflow ● Hadoop (HDFS) и Hive ● Мониторинг ETL: Grafana/Prometheus или Victoria Metrics ● Опыт работы с биллинговыми системами (желательно телеком-домен) ➕ **Как преимущество** ● Потоковая обработка: Kafka Streams / Spark Streaming ● Informatica PowerCenter (понимание мигрируемой системы) ● Бинарные форматы хранения в Hadoop ● Различия: Hive vs Impala, Greenplum vs PostgreSQL, Clickhouse vs PostgreSQL ● Patroni для кластеризации PostgreSQL/Greenplum ● S3-хранилища ● КриптоПро или защищенные каналы передачи данных 📋 **Задачи** ● Миграция ETL-системы телеком-оператора с Oracle/Informatica на Apache стек (S3, Airflow, NiFi, Kafka, Greenplum) ● Перенос бизнес-логики из Informatica в высокопроизводительный SQL-код ● Написание и оптимизация SQL для витрин данных и ETL-процессов ● Разработка DAG-ов в Airflow ● Настройка пайплайнов в NiFi (источники: Oracle, PostgreSQL; приемники: S3, файловые архивы) ● Разработка Spark-джобов (PySpark) для больших объемов ● Интеграция с Kafka для потоковой передачи ● Настройка мониторинга (Grafana/Prometheus) и отслеживание метрик ● Разбор инцидентов по качеству данных и ошибкам загрузки ● Code review
Стек и инструменты
Сколько платят вам?
Анонимно укажите, сколько вы получаете как Data/ML-специалист, — сразу покажем, в скольких вакансиях платят меньше. А из ответов сложится зарплата, которую платят на деле, а не обещают.
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Ещё в Top Selection
74 активные вакансии в компании
Senior Full-stack Developer (Go)
Full-stack разработка на Go и TypeScript/React: создание и поддержка решений, построение и деплой API, работа с AI-агентами. Нужно проектировать схемы данных и оптимизировать запросы в PostgreSQL, делать пользовательские интерфейсы, работать с Docker, GitLab CI и Kubernetes.
Системный аналитик 1С
Нужен системный аналитик 1С для поддержки и развития системы 1С:ERP Управление холдингом в части бюджетирования и управленческого учета. Требуется отличное знание управленческого учета, подсистем 1С:УХ и опыт внедрения от 3 лет, а также сбор требований и постановка задач разработчикам. Проектная занятость на фуллтайм, оформление только через ИП, ставка 272–300 тыс. рублей.
Удалённо: RU
Разработчик BPM Elma365
Нужно разрабатывать и дорабатывать приложения в BPM-системе Elma365, настраивать интеграции с внешними сервисами и администрировать платформу. Также предстоит участвовать в анализе бизнес-требований, код-ревью и планировании развития системы, работать с интеграторами и вендорами. Это low-code разработка на стыке бизнес-анализа и администрирования.
Разработчик C++
~1 610 700 ₸ оценка по всем рынкам
Разработка ПО для торговых и клиринговых систем на C++ с упором на многопоточность и сетевое взаимодействие (TCP, UDP). В задачи входит ревью кода, тестирование, оптимизация производительности и архитектуры приложений. Условия и уровень не уточнены.
Похожие вакансии
6 вакансий
Python Developer (AI Agents) / Middle
~2 317 080 ₸ оценка по всем рынкам
Разработка и интеграция ИИ-агентов и мультиагентных платформ на базе LLM. Нужно уметь работать с асинхронным кодом, тестировать и оптимизировать решения, следить за информационной безопасностью. Стек — Python, Docker, Kubernetes, FastAPI, PostgreSQL.
MLOps Engineer
~2 317 080 ₸ оценка по стеку, все рынки
Нужен инженер, который построит MLOps-инфраструктуру с нуля для R&D-команды: автоматизация обучения, тестирования и деплоя ML-моделей, управление датасетами и экспериментами, GPU-среды и embedded-платформы вроде NVIDIA Jetson. Требуется 3+ года в MLOps/DevOps для ML, уверенные Linux, Python, Bash, Docker, CI/CD, опыт с GPU/CUDA, PyTorch, MLflow или DVC. Предлагают гибкий формат, доступ к GPU-ресурсам, бронирование от мобилизации и влияние на архитектуру AI-продуктов.
Senior ML Engineer (Python / NLP / LLM)
~2 720 302 ₸ оценка по всем рынкам
Нужен ML-инженер для проектирования и оптимизации ML-пайплайнов: от подготовки данных до вывода моделей в продакшн. Работа включает NLP/LLM, общение с заказчиками и развитие агентных AI-систем. Основной стек — Python, PyTorch, Hugging Face и scikit-learn.
ML Engineer
~1 453 205 ₸ оценка по всем рынкам
Нужен ML-инженер с опытом от 3 лет для работы над системами рекомендаций: улучшение ранжирования объявлений, оптимизация инференс-моделей и развитие MLOps. Требуются уверенный Python, знания в DevOps/MLOps и самостоятельность. Условия и локация в тексте не указаны.
Forward Deployed Machine Learning Engineer
Роль предполагает работу напрямую с AI-лабораториями и корпоративными партнёрами: постановка исследовательских задач, построение систем обработки данных, внедрение ML и evaluation-пайплайнов, а также разработка агентных и LLM-систем в продакшене. Нужна сильная инженерная база на Python, опыт с LLM и ML-инфраструктурой, а также навыки коммуникации с партнёрами.
Старший Data Scientist
Нужен старший Data Scientist для разработки ML-моделей и анализа данных в интересах крупного государственного учреждения, с фокусом на сельское хозяйство. В задачи входит поддержка соответствия требованиям, управление потоками данных и обеспечение их качества, а также помощь в принятии решений на основе данных. Требуется уверенный опыт в машинном обучении и работе с данными.