Data Engineer (ETL-миграция)
Нужен сильный Data Engineer для миграции ETL-системы телеком-оператора с Oracle/Informatica на Apache стек (Airflow, NiFi, Kafka, Spark, Greenplum, S3). Требуется глубокий SQL, опыт миграции ETL, работа с Oracle PL/SQL, PostgreSQL, Greenplum/ClickHouse и проектирование пайплайнов на Spark/NiFi/Airflow. Проектная занятость через кадровое агентство Top Selection, уровень Senior.
Отклик отправляется на сайте источника. Регистрация в Taylor для перехода не нужна.
Эта вакансия платит больше рынка
На 11% выше медианы Data/ML по 72 вакансиям за 90 дней, рынок — СНГ (RUB); город и грейд вакансии не учтены.
Что предстоит делать
Навыки: Oracle PL/SQL, Высоконагруженные системы, PostgreSQL, Greenplum, ClickHouse, Apache Airflow, Apache Spark, Apache NiFi, Apache Kafka, Apache Hadoop. Квалификация: Senior. Специализации: Инженер по данным. Привет! Меня зовут Марина. 👋 Я представляю группу компаний Top Selection. Мы занимаемся трудоустройством IT специалистов на проектную занятость. На данный момент мы в поиске сильного **Data Engineer (ETL-миграция)** для участия в миграции ИС на Apache стек. ✅ **Требования** ● Опыт миграции ETL-систем (желательно с Oracle/Informatica на Apache стек) ● Глубокий SQL: оконные функции, сложные джойны, иерархические запросы ● Оптимизация SQL для highload (партиционирование, индексы, explain plans) ● Oracle (PL/SQL) и PostgreSQL ● Greenplum и/или Clickhouse ● Проектирование архитектур на Apache Spark (PySpark), NiFi, Airflow ● Hadoop (HDFS) и Hive ● Мониторинг ETL: Grafana/Prometheus или Victoria Metrics ● Опыт работы с биллинговыми системами (желательно телеком-домен) ➕ **Как преимущество** ● Потоковая обработка: Kafka Streams / Spark Streaming ● Informatica PowerCenter (понимание мигрируемой системы) ● Бинарные форматы хранения в Hadoop ● Различия: Hive vs Impala, Greenplum vs PostgreSQL, Clickhouse vs PostgreSQL ● Patroni для кластеризации PostgreSQL/Greenplum ● S3-хранилища ● КриптоПро или защищенные каналы передачи данных 📋 **Задачи** ● Миграция ETL-системы телеком-оператора с Oracle/Informatica на Apache стек (S3, Airflow, NiFi, Kafka, Greenplum) ● Перенос бизнес-логики из Informatica в высокопроизводительный SQL-код ● Написание и оптимизация SQL для витрин данных и ETL-процессов ● Разработка DAG-ов в Airflow ● Настройка пайплайнов в NiFi (источники: Oracle, PostgreSQL; приемники: S3, файловые архивы) ● Разработка Spark-джобов (PySpark) для больших объемов ● Интеграция с Kafka для потоковой передачи ● Настройка мониторинга (Grafana/Prometheus) и отслеживание метрик ● Разбор инцидентов по качеству данных и ошибкам загрузки ● Code review
Стек и инструменты
Сколько платят вам?
Анонимно укажите, сколько вы получаете как Data/ML-специалист, — сразу покажем, в скольких вакансиях платят меньше. А из ответов сложится зарплата, которую платят на деле, а не обещают.
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Ещё в Top Selection
67 активных вакансий в компании
System Analyst (Senior)
Ищем старшего системного аналитика в команду листинга ритейл/e-commerce проекта. Нужно вести задачи от сбора и валидации требований до приёмочного тестирования и сопровождения, проектировать интеграции REST/Kafka, моделировать UML и BPMN, писать SQL, а также лидировать команду аналитиков. Формат удалённый, оформление только как ИП, часовой пояс МСК ±3ч.
Разработчик SAP
~1 316 000 – 1 456 000 ₸ оценка
Нужен senior-разработчик SAP PI/PO для интеграций между SAP и внешними системами: маппинги, адаптеры, маршрутизация, поддержка прода и участие в миграции на FESB. Требуется коммерческий опыт от 3–4 лет, уверенное владение Graphical/XSLT/Java Mapping и адаптерами REST, SOAP, IDoc, JMS, JDBC. Оформление как ИП, полная занятость, локация РФ.
BI Superset Developer Senior
Разработка BI-решений на Superset, проектирование витрин данных и создание кастомных визуализаций. Глубокая работа с Python и JavaScript/TypeScript, настройка CI/CD, участие в онбординге и собеседованиях.
Data Scientist
~1 151 432 ₸ оценка по всем рынкам
Разработка и внедрение ИИ-агентов на Python, проектирование SDK и формирование оценочных датасетов. Нужен опыт с современными архитектурами, параллельной и конкурентной обработкой задач, FastAPI, микросервисами, Docker и Kubernetes. Удалённая работа на полную занятость с оформлением как ИП.
Похожие вакансии
6 вакансийData Scientist (Middle+/Senior)
Нужно формулировать бизнес-задачи в ML-решения, проводить исследовательский анализ данных и разрабатывать модели — от классического ML и статистики до рекомендательных систем и NLP/LLM. Также предстоит валидировать модели, оценивать качество, внедрять их в продакшн и следить за работой после запуска в тесной связке с командой.
Старший Data Scientist
~2 029 725 ₸ оценка
Ищем старшего Data Scientist, который умеет вести задачу от бизнес-вопроса до работающего в продакшене решения. Нужно строить и валидировать ML-модели, работать с грязными данными, метриками и экспериментами, доводить модели до продакшена вместе с инженерами. Требуется 5+ лет опыта в DS/ML, уверенный Python (Pandas, NumPy, scikit-learn), статистика, SQL, MLOps и облака, английский Upper-Intermediate и выше.
Главный BI-разработчик
~1 050 000 – 1 750 000 ₸ оценка по стеку
AITAS ищет главного BI-разработчика: строить отчёты и интерактивные дашборды в Power BI, писать сложные SQL-запросы, интегрировать данные из CRM, ERP, API и Excel, следить за качеством данных и оптимизировать производительность. Нужен опыт в Power BI от 1–3 лет, уверенный SQL (JOIN, CTE, оконные функции), понимание DWH, ETL/ELT и моделирования данных, английский для чтения документации. Плюсом будут Tableau, Qlik Sense и другие продукты Microsoft.
Data Scientist Middle
~1 388 613 ₸ оценка по всем рынкам
Нужен ML-специалист для решения бизнес-задач в ценообразовании и прогнозировании. Работа end-to-end: разработка и оценка моделей на временных рядах и uplift modeling, анализ A/B-тестов и работа с данными. Требуется уверенный Python, SQL и опыт классического ML в бизнесе.
Продуктовый аналитик
~1 736 000 – 2 240 000 ₸ оценка
Нужен продуктовый аналитик для цифровизации процессов техобслуживания и ремонта на Липецкой площадке НЛМК: собирать гипотезы, считать экономический эффект, описывать процессы и требования к ИТ-решениям. Важны понимание ТОиР и промышленных систем (ERP/EAM, MES, SCADA), работа с данными и Excel, базовый SQL. Предлагают оформление по ТК РФ, ДМС, обучение и корпоративные льготы.
Дата инженер
~896 000 – 1 680 000 ₸ оценка
Нужен дата-инженер на крупный банковский проект: репликация данных из S3 в Hadoop, разработка и тестирование ETL-процессов, анализ требований и проектная документация. Ждут уверенный SQL, Python и опыт с Apache Spark, Hadoop/S3 и Airflow, плюсом будут Parquet/ORC, Iceberg, Kafka и Data Vault. Предлагают ДМС со стоматологией, технику, внутренние митапы и сессии профессионального развития.