Data Engineer
Ищем Senior Data Engineer для миграции ETL-процессов с Informatica PowerCenter на стек NiFi + Airflow + Greenplum. Нужен опыт управления командой от 4 лет, глубокая работа с SQL/PLSQL, Python, PySpark, Airflow и NiFi, а также знание Hadoop, Kafka и СУБД. Предстоит проектировать и оптимизировать потоки данных, писать документацию и следить за качеством данных.
Отклик отправляется на сайте источника. Регистрация в Taylor для перехода не нужна.
Эта вакансия платит больше рынка
На 19% выше медианы Data/ML по 75 вакансиям за 90 дней, рынок — СНГ (RUB); город и грейд вакансии не учтены.
Что предстоит делать
Навыки: Python. Квалификация: Senior. Специализации: MLOps-инженер. ** 👋Привет! Меня зовут Ирина. Я представляю группу компаний Top Selection. 🔥В данный момент мы в поисках Data engineer **🔥 🛠**Требования:** - Опыт TeamLead (управление командой) не менее 4 лет; - Опыт разработки ETL/ELT-процессов, в которых значительная часть логики реализована на стороне СУБД; - Опыт разработки и сопровождения хранимых процедур / функций в СУБД; - Практический опыт использования SQL/PLSQL или аналогичных процедурных расширений SQL для реализации загрузок и трансформаций данных; - Опыт участия в проектах миграции ETL-систем (Apache стек); - Опыт разработки на Python (написание ETL-скриптов, работа с pandas, интеграция с API); - Опыт написания и отладки DAG'ов в Apache Airflow (не только проектирование, но и разработка); - Опыт работы с PySpark (трансформации, оптимизация, партиционирование); - Опыт миграции ETL-процессов с Informatica PowerCenter на открытый стек (Airflow + Greenplum); - Глубокое практическое знание NiFi и Airflow: проектирование потоков, подключение источников, обработка ошибок, мониторинг, отладка; - Опыт работы с качеством данных: разработка правил валидации, анализ влияния на бизнес-процессы; - Понимание архитектурных подходов к проектированию хранилищ, различие ETL и ELT; - Опыт работы с Hive metastore (устройство, хранение на PostgreSQL) и форматами файлов (Parquet, ORC); - Опыт работы с Оracle; - Опыт применения сложных SQL-запросов (оконные функции, джоины); - Умение оптимизировать запросы для highload-среды; - Опыт проектирования интеграций Apache-стека с Kafka и BI-системами; - Опыт настройки потоковой обработки данных; - Опыт работы с Hadoop и Hive (знание версий, источников данных); - Опыт работы с PostgreSQL, Greenplum, Clickhouse; - Опыт работы с Grafana/Prometheus для отслеживания ETL-процессов; - Опыт работы с биллингом; - Опыт автоматической валидации и контроля качества данных после миграции (сравнение результатов, метрики); **📌Обязанности:** - Миграция ETL-процессов с Informatica PowerCenter на целевой стек: NiFi + Airflow + Greenplum + SQL/хранимые процедуры. - Подготовка документации AS IS и TO BE; - Написание SQL кода; - Отслеживание метрик. 📲**Контакт для связи:** @Iryn_pnz
Стек и инструменты
Сколько платят вам?
Анонимно укажите, сколько вы получаете как Data/ML-специалист, — сразу покажем, в скольких вакансиях платят меньше. А из ответов сложится зарплата, которую платят на деле, а не обещают.
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Ещё в Top Selection
73 активные вакансии в компании
Системный аналитик 1С
Нужен системный аналитик 1С для поддержки и развития системы 1С:ERP Управление холдингом в части бюджетирования и управленческого учета. Требуется отличное знание управленческого учета, подсистем 1С:УХ и опыт внедрения от 3 лет, а также сбор требований и постановка задач разработчикам. Проектная занятость на фуллтайм, оформление только через ИП, ставка 272–300 тыс. рублей.
Разработчик BPM Elma365
Нужно разрабатывать и дорабатывать приложения в BPM-системе Elma365, настраивать интеграции с внешними сервисами и администрировать платформу. Также предстоит участвовать в анализе бизнес-требований, код-ревью и планировании развития системы, работать с интеграторами и вендорами. Это low-code разработка на стыке бизнес-анализа и администрирования.
Разработчик C++
~1 583 400 ₸ оценка по всем рынкам
Разработка ПО для торговых и клиринговых систем на C++ с упором на многопоточность и сетевое взаимодействие (TCP, UDP). В задачи входит ревью кода, тестирование, оптимизация производительности и архитектуры приложений. Условия и уровень не уточнены.
Solution Architect
~1 283 100 – 1 419 600 ₸ оценка
Ищут Solution Architect, который займётся целевой архитектурой распределённых систем и внедрением практик agent-engineering и AI-assisted разработки. Нужен опыт 5+ лет в разработке и 2–3 года в архитектуре, глубокое знание микросервисов, интеграций, облаков и методов моделирования. Оформление как ИП, полная занятость, локация и гражданство РФ.
Похожие вакансии
6 вакансий
Системный аналитик по данным (DWH)
~1 365 000 – 1 528 800 ₸ оценка
Нужен системный аналитик по данным, который будет собирать требования к отчётности, разбирать существующую логику расчётов и проектировать модели и витрины в DWH для BI. Ключевое — уверенный SQL, опыт моделирования данных и понимание ETL/ELT, плюс умение восстанавливать алгоритмы по чужому коду и документации. В плюс — знание структуры 1С (ЗУП), Airflow, ClickHouse, dbt и Python.
MLOps Engineer
~2 203 386 ₸ оценка по стеку, все рынки
Нужен инженер, который построит MLOps-инфраструктуру с нуля для R&D-команды: автоматизация обучения, тестирования и деплоя ML-моделей, управление датасетами и экспериментами, GPU-среды и embedded-платформы вроде NVIDIA Jetson. Требуется 3+ года в MLOps/DevOps для ML, уверенные Linux, Python, Bash, Docker, CI/CD, опыт с GPU/CUDA, PyTorch, MLflow или DVC. Предлагают гибкий формат, доступ к GPU-ресурсам, бронирование от мобилизации и влияние на архитектуру AI-продуктов.
Middle+ DWH Engineer
~1 092 000 – 1 419 600 ₸ оценка
Инженер по данным будет разрабатывать DWH и витрины данных, оптимизировать ETL-пайплайны и участвовать в улучшении архитектуры аналитического хранилища. Нужны уверенный SQL, опыт с MPP СУБД (Vertica/Clickhouse/Greenplum) от года, а также DBT, Trino, GIT и AirFlow. Уровень — Middle.
Продуктовый аналитик
~1 092 000 – 1 419 600 ₸ оценка
Нужен продуктовый аналитик, который будет исследовать поведение пользователей, искать точки роста продукта и оценивать эффект инициатив на данных. Ключевые требования — опыт в продуктовом анализе от года, уверенный SQL, Python для анализа данных и знание матстатистики, включая A/B-тесты. В задачах также дашборды, алерты по метрикам, автоматизация отчётности и использование AI-инструментов в работе.
Старший Fullstack инженер (Python/AWS)
~2 203 386 ₸ оценка по стеку, все рынки
Нужен старший инженер, который построит с нуля продакшн-платформу данных для американской healthcare-компании: пайплайны от сырых данных клиентов до единой модели и аналитического слоя, а также путь деплоя ML-моделей. Стек — Python на AWS, Docker и Kubernetes, с упором на open-source инструменты. Требуют серьёзного опыта в data engineering, ETL, SQL и самостоятельности: работать придётся напрямую с CTO и заказчиком, без большой команды.
AI Engineer
~2 203 386 ₸ оценка по всем рынкам
Команда экспериментальных финтех-проектов Яндекса ищет AI Engineer для создания финансового сервиса на базе AI-агентов. Нужно проектировать агентные сценарии, интегрировать LLM с сервисами и данными, оценивать качество ответов и быстро проверять гипотезы через MVP. Ждут более пяти лет коммерческой разработки, опыт работы с LLM и умение самостоятельно доводить задачи до запуска.