Data engineer
Компания по развитию лотерейной культуры в России ищет Data engineer для построения и оптимизации процессов загрузки и обработки данных. Требуется опыт работы с Python, Bash, Airflow, dbt, Clickhouse, Docker и Kubernetes. Предлагают гибридный или удаленный формат, ДМС и карьерный рост.
Зарплата не указана — оценили по рынку
На основе 15 похожих вакансий за 90 дней.
Что предстоит делать
Наша задача — развитие лотерейной культуры в России. Сделать лотереи по-настоящему национальной традицией, объединяющей поколения, где каждый сможет найти свою игру. В связи с развитием компании ищем в нашу команду Data engineer.
- Разработка, поддержка и оптимизация ELT и CDC процессов загрузки данных из источников (bash, python, airflow, peerdb) в соответствии с архитектурными стандартами;
- Построение, поддержка и оптимизация обработки данных в Datalake и сырого слоя DWH (s3, clickouse, dbt, airflow);
- Отслеживание полноты, качества и описания данных из источников (dbt, openmetadata);
- Организация и заключение контрактов на поставку данных из источников (dbt, openmetadata);
- Настройка системы оповещений: Messenger/email уведомления о проблемах качества, SLA нарушениях, падениях загрузок и отчетности (airflow);
- Полное описание объектов сырого слоя: dbt docs, data catalog;
- Ведение переговоров с владельцами источников данных;
- Консультации дата-аналитиков по источникам данных;
- Консультации и обмен знаниями с пользователями об источниках данных.
Что ждём от вас
- Знания основ промышленной разработки программного обеспечения и его беспрерывной доставки;
- Знания способов взаимодействия компьютерных систем при передачи данных;
- Знания архитектуры построения озер и хранилищ данных, теорию СУБД;
- Навыки использования Linux на уровне продвинутого пользователя;
- Навыки виртуализации и контейнеризации;
- Знания основ информационной безопасности;
- Опыт организации сбора из внешних и внутренних источников по сетевым протоколам и прикладным API;
- Опыт организации хранения и обработки данных в корпоративном озере и хранилище данных: Minio S3, Clickhouse, PostgreSQL;
- Опыт использования декларативных языков запросов и разметки: SQL (приоритет Clickhouse), regex, jinja, yaml, json;
- Опыт использования Docker и Kubernetes как среды исполнения ПО в Linux окружении;
- Навыки программирования на языках: Python, Bash;
- Владение инструментами Data стека: Aiflow, dbt, PeerDB;
- Владение инструментами локальной разработки: VS Code, DBeaver, Jupyter;
- Владение инструментами CI\CD: Gitlab
- ВАЖНО: готовность пройти испытательный срок (3 месяца) в офисе (Москва).
Что предлагаем
Стек и инструменты
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Ещё в Национальная Лотерея
2 активные вакансии в компании
Senior Java разработчик
~1 591 200 – 2 121 600 ₸ оценка
Компания, развивающая лотерейную культуру в России, ищет Senior Java-разработчика. Нужно будет заниматься разработкой и развитием проектов, писать качественный код, проводить рефакторинг и оптимизацию, участвовать в код-ревью. Основные требования: опыт коммерческой разработки на Java от 5 лет, знание Spring Boot, PostgreSQL, микросервисной архитектуры, REST API, RabbitMQ, Kafka, Docker и Kubernetes. Предлагают удалённый или гибридный формат работы, оформление по ТК РФ, ДМС, корпоративные скидки и возможности для карьерного роста.
Похожие вакансии
6 вакансий
Data Scientist (ML)
~861 900 ₸ оценка
Ищем дата-саентиста для разработки ИИ-сервисов внутри компании. Вы будете работать с современными LLM, дообучать модели, решать задачи NLP и CV. Требуется уверенное владение Python, опыт с PyTorch и классическим ML.
Аналитик данных (FMCG)
~861 900 ₸ оценка
Компания ищет аналитика данных для работы с продажами и дистрибуцией на рынке FMCG. Требуется опыт работы с данными, продвинутое владение Excel и Power Point, знание SQL и Power BI будет плюсом. Предлагается гибридный формат или удаленная работа, белая зарплата и ДМС.
Продуктовый аналитик
~861 900 ₸ оценка
Level.Travel ищет продуктового аналитика для работы над traveltech платформой. Нужно строить дашборды, проводить A/B-тесты и анализировать данные. Требуются уверенные Python и SQL, опыт с ClickHouse. Предлагают гибридный формат, скидки на путешествия и обучение.
Аналитик данных (FMCG)
~861 900 ₸ оценка
Аналитик данных в FMCG: работа с клиентами, анализ рынка, подготовка отчетов. Требуется опыт в FMCG и Excel. Плюсом знание SQL и Python. Удаленная работа, ДМС, карьерный рост.
Архитектор (Data/AI)
~3 548 021 – 4 478 606 ₸ оценка
СберЗдоровье, ведущая MedTech-компания России, ищет Архитектора (Data/AI) для проектирования и сопровождения решений в области данных, аналитики и AI/ML. Требуется опыт работы с data-платформами, знание SQL, PostgreSQL, ClickHouse, k8s и других современных инструментов. Предлагается удаленная работа, медицинская программа, курсы английского и спортивные активности.
Аналитик колл-центра (iGaming)
Ищем аналитика для международного iGaming-продукта, который будет анализировать работу колл-центра, строить отчеты и дашборды, влиять на retention и эффективность команды. Требуется опыт аналитики в продажах или колл-центрах от 2 лет, уверенный SQL и Python, знание BI (Tableau) и CRM. Предлагают 100% удаленку, конкурентную зарплату, поддержку обучения и работу без бюрократии.