Data Engineer
Разработка и поддержка ETL/ELT пайплайнов на PySpark, работа с OLAP-движками Starrocks/ClickHouse, миграция с HDFS на S3 и оптимизация Spark-приложений. Требуется опыт Python от 3 лет, глубокое знание SQL, Airflow и колоночных БД. Предлагают оклад с годовым бонусом, ДМС с первого месяца и корпоративные спортивные программы.
Отклик отправляется на сайте источника. Регистрация в Taylor для перехода не нужна.
Зарплата не указана — оценили по рынку
На основе 127 похожих вакансий за 90 дней по всем рынкам вместе — отдельной выборки по рынку этой вакансии нет.
Что предстоит делать
KION — это часть цифровой экосистемы МТС. Мы создаем оригинальный развлекательный контент развиваем сервисы для просмотра фильмов и сериалов на любом устройстве. Наш флагманский проект — современный онлайн-кинотеатр KION который предлагает более 200 телеканалов, тысячи фильмов, сериалов, мультфильмов и документальных проектов. Наша команда занимается внедрением lakehouse нового поколения, в котором мы разделяем compute от storage. Есть текущий проект с DWH в виде Greenplum и Hadoop который планируется перевести в поддержку.
- Разрабатывать и проводить рефакторинг ETL/ELT пайплайнов на pyspark;
- Разрабатывать и поддерживать OLAP движки Starrocks/Clickhouse;
- Поддерживать текущие пайплайны на Greenplum и Hadoop;
- Осуществлять миграцию с HDFS на S3;
- Проводить оптимизацию Spark-приложений;
- Что мы ожидаем:
- Опыт работы с Python от 3 лет;
- Глубокое знание SQL и опыт работы с большими данными;
- Опыт работы с Apache Airflow
- Опыт проектирования и разработки ETL/ELT процессов;
- Опыт работы с колоночными БД (ClickHouse);
- Знание принципов построения Data Warehouse и Data Lake;
- Понимание разницы между OLTP/OLAP системами;
- Уверенная работа c linux и git;
- Понимание процессов ci/cd;
Что предлагаем
Стек и инструменты
Сколько платят вам?
Анонимно укажите, сколько вы получаете как Data/ML-специалист, — сразу покажем, в скольких вакансиях платят меньше. А из ответов сложится зарплата, которую платят на деле, а не обещают.
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Похожие вакансии
6 вакансий
Data Engineer (Azure Databricks / PySpark)
~704 540 ₸ оценка
Нужен опытный Data Engineer для долгосрочного проекта австрийского клиента из логистики. Задача — строить и поддерживать пайплайны и интеграции данных в Azure Lakehouse на Databricks и PySpark, следить за качеством данных и помогать с моделями Power BI. Требуются коммерческий опыт в Data Engineering, уверенные Python и SQL, знание ETL/ELT и английский или немецкий на уровне B1–B2. Работа полностью удалённая, full-time, с международной командой.
Аналитик репутации / Consulting Analytics
~1 388 613 ₸ оценка по всем рынкам
Нужен эксперт по репутационной аналитике: проводить аудиты клиентов (поиск, медиа, соцсети, отзывы), писать стратегии и коммерческие предложения под B2B-сделки, развивать методологию и внедрять AI-инструменты. Требуется 3+ года в аналитике/консалтинге, системное мышление, сильный письменный язык, опыт с инструментами медиамониторинга и английский от B2. Предлагают удалёнку на полную занятость, гибкий график и международную команду.
Azure Data Engineer
~1 388 613 ₸ оценка по стеку, все рынки
Нужен опытный Azure Data Engineer для развития и модернизации крупной корпоративной data-платформы. Задачи — строить и поддерживать пайплайны на Azure Databricks, Synapse и Spark, мигрировать на Unity Catalog и Delta Live Tables, следить за производительностью и качеством данных. Требуют уверенный коммерческий опыт с Azure Databricks и Synapse, Python, SQL и Spark, понимание Lakehouse и английский B2+.
Аналитик данных / Web Analyst
~650 000 ₸ оценка
Нужен веб-аналитик, который настраивает трекинг в GTM и GA4, пишет ТЗ разработчикам на события и следит за качеством данных. Важно уметь дебажить через DevTools, знать базовый SQL и разбираться в архитектуре данных в BigQuery, собирать дашборды в Looker Studio. Опыт аналитиком от 3 лет, работа удалённая с гибким началом дня, оплачиваемый отпуск и больничные.
Data Scientist / MLE
~1 388 613 ₸ оценка по всем рынкам
Компания Artellence ищет Data Scientist/MLE для работы над OSINT-продуктами: биометрическая идентификация, анализ объектов на фото, AI-агенты. Нужен опыт DS/MLE от 2 лет, сильная математика, глубокие знания ML/DL, Python и фреймворков TensorFlow/PyTorch, опыт NLP и tabular ML. Работа удалённая с гибким графиком, есть поддержка бронирования для ключевых сотрудников.
RevOps / Business Systems Analyst
~1 388 613 ₸ оценка по всем рынкам
Нужен специалист по RevOps, который разбирается в бизнес-процессах Sales, Customer Success и Finance и превращает бизнес-проблемы в аналитику и автоматизации. Работа с CRM (HubSpot, Bitrix24), базами данных, BI-дашбордами и AI-агентами, самостоятельное написание кода не обязательно, но нужно понимать SQL и логику систем. Требуют 3+ года опыта, английский от B2; предлагают удалёнку, гибкий график и опционы.