Data Engineer
Ищем Senior Data Engineer для миграции ETL-процессов с Informatica PowerCenter на стек NiFi + Airflow + Greenplum. Нужен опыт управления командой от 4 лет, глубокая работа с SQL/PLSQL, Python, PySpark, Airflow и NiFi, а также знание Hadoop, Kafka и СУБД. Предстоит проектировать и оптимизировать потоки данных, писать документацию и следить за качеством данных.
Отклик отправляется на сайте источника. Регистрация в Taylor для перехода не нужна.
Что предстоит делать
Навыки: Python. Квалификация: Senior. Специализации: MLOps-инженер. ** 👋Привет! Меня зовут Ирина. Я представляю группу компаний Top Selection. 🔥В данный момент мы в поисках Data engineer **🔥 🛠**Требования:** - Опыт TeamLead (управление командой) не менее 4 лет; - Опыт разработки ETL/ELT-процессов, в которых значительная часть логики реализована на стороне СУБД; - Опыт разработки и сопровождения хранимых процедур / функций в СУБД; - Практический опыт использования SQL/PLSQL или аналогичных процедурных расширений SQL для реализации загрузок и трансформаций данных; - Опыт участия в проектах миграции ETL-систем (Apache стек); - Опыт разработки на Python (написание ETL-скриптов, работа с pandas, интеграция с API); - Опыт написания и отладки DAG'ов в Apache Airflow (не только проектирование, но и разработка); - Опыт работы с PySpark (трансформации, оптимизация, партиционирование); - Опыт миграции ETL-процессов с Informatica PowerCenter на открытый стек (Airflow + Greenplum); - Глубокое практическое знание NiFi и Airflow: проектирование потоков, подключение источников, обработка ошибок, мониторинг, отладка; - Опыт работы с качеством данных: разработка правил валидации, анализ влияния на бизнес-процессы; - Понимание архитектурных подходов к проектированию хранилищ, различие ETL и ELT; - Опыт работы с Hive metastore (устройство, хранение на PostgreSQL) и форматами файлов (Parquet, ORC); - Опыт работы с Оracle; - Опыт применения сложных SQL-запросов (оконные функции, джоины); - Умение оптимизировать запросы для highload-среды; - Опыт проектирования интеграций Apache-стека с Kafka и BI-системами; - Опыт настройки потоковой обработки данных; - Опыт работы с Hadoop и Hive (знание версий, источников данных); - Опыт работы с PostgreSQL, Greenplum, Clickhouse; - Опыт работы с Grafana/Prometheus для отслеживания ETL-процессов; - Опыт работы с биллингом; - Опыт автоматической валидации и контроля качества данных после миграции (сравнение результатов, метрики); **📌Обязанности:** - Миграция ETL-процессов с Informatica PowerCenter на целевой стек: NiFi + Airflow + Greenplum + SQL/хранимые процедуры. - Подготовка документации AS IS и TO BE; - Написание SQL кода; - Отслеживание метрик. 📲**Контакт для связи:** @Iryn_pnz
Стек и инструменты
Эта вакансия платит больше рынка
На 16% выше медианы Data/ML по 59 вакансиям за 90 дней.
Сколько платят вам?
Вакансии показывают, что обещают работодатели. Анонимно расскажите, сколько получаете вы как Data/ML-специалиста — так появится зарплата, которую платят на деле.
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Ещё в Top Selection
52 активные вакансии в компании
Data Scientist
~1 359 150 ₸ оценка
Нужно делать AI-решения: LLM-агентов, ML- и NLP-модели, доводить их до продакшена и встраивать в ИТ-системы компании. Основные требования — уверенный Python-стек и умение проектировать архитектуру таких решений. Детали по опыту, локации и условиям в вакансии не указаны.
SAP консультант
Нужен SAP консультант с опытом в модуле FI и внедрении Accrual Management (ACR) в S/4HANA, включая Purchase Order Accruals. Предстоит анализировать требования, готовить функциональные спецификации и настраивать интеграцию с MM и SD. Проектная занятость, фуллтайм, оформление только через ИП, ставка 256–280 тыс. руб., английский от B1.
Data Scientist
~1 359 150 ₸ оценка по стеку
Ищем Data Scientist/AI Engineer, который будет строить и выводить в продакшн решения на базе ИИ, включая AI-агентов на LLM, и вести эксперименты с моделями от гипотез до бенчмарков. Нужен коммерческий опыт от 3 лет, сильная база в классическом ML и Deep Learning (NLP), понимание архитектуры Transformer, практика fine-tuning GPT/BERT-подобных моделей, стек Python (Torch, Transformers) и промышленная работа с k8s. Работа предполагает плотное взаимодействие с архитекторами и ИБ, ведение документации и разворачивание решений в контуре заказчика (GitLab, Confluence).
Python Developer Senior
Нужен backend-разработчик на Python для проектирования и развития сервисов в финансовой сфере. Стек: FastAPI/Litestar, Kafka, Redis, PostgreSQL, event-driven-архитектура, асинхронные процессы, наблюдаемость и тестирование. Оформление через ИП.
Похожие вакансии
6 вакансийВедущий ML-инженер
~2 017 980 ₸ оценка
Нужен ведущий ML-инженер для развития моделей прогноза спроса и ценовой эластичности, causal inference, batch training/inference и ML-мониторинга. От кандидата ждут сильного опыта в ML, статистике, Python, SQL, Airflow и ClickHouse, а также готовности менторить команду.
Аналитик данных
~2 017 980 ₸ оценка по стеку
Аналитик данных в отделе развития и миграции мобильной базы телеком-оператора: регулярная и ad-hoc аналитика тарифов, услуг и доходов, автоматизация отчётности и дашбордов, A/B-тесты, когортный анализ и прогнозирование метрик, работа с витринами данных. Нужны продвинутые SQL (оконные функции и оптимизация), Python (Pandas, NumPy, PySpark), матстатистика, HDFS и Power BI, плюс умение превращать неопределённость в структуру и защищать выводы перед бизнесом. Предлагают кросс-командную работу с дата-инженерами и продакт-менеджерами, влияние на продуктовые решения и роль наставника в аналитической команде.
Аналитик данных
~2 017 980 ₸ оценка по стеку
Нужен аналитик данных в горнорудную группу компаний: собирать и чистить производственные данные, строить дашборды и автоматизированную отчетность, находить причины отклонений показателей и готовить выводы для руководства. Ждут опыт в аналитике/BI от 4 лет, продвинутый Excel, Power BI или Tableau, SQL, английский от B1 и умение применять AI-инструменты в работе. Предлагают офис в центре Алматы, график 8:30-17:30, поддержку опытных аналитиков и карьерный рост в финансовом блоке.
BI-разработчик
~2 017 980 ₸ оценка по стеку
Ищем Senior BI-разработчика для создания и оптимизации дашбордов и ETL-процессов в Qlik Sense. Нужен опыт работы с QlikSense или Insight более 3 лет, уверенный SQL, моделирование данных, дизайн интерфейсов и коммуникация с бизнес-заказчиком. Будет плюсом сертификация Qlik, VBA, JavaScript, интеграции с SAP и внешними системами.
ML Engineer (Middle)
~1 359 150 ₸ оценка
Нужно строить и оптимизировать ML-пайплайны для языковых моделей: готовить и размечать данные, делать fine-tuning на Python/PyTorch/Hugging Face, запускать inference и интегрировать модель в production. Также важны анализ метрик и ошибок, оптимизация вычислений и работа с Docker и Kubernetes. Условия в тексте вакансии не описаны.
AI Developer Middle/Senior
Разработка и эксплуатация AI-агентов на Python: интеграция моделей, работа с внешними API и деплой микросервисов в Docker, Kubernetes и Helm. Нужно писать код, следить за безопасностью зависимостей и устранять инциденты в продакшене. Роль предполагает поддержку и обновление сервисов.