Data Engineer

Что предстоит делать

Мы - Ви.Тех, аккредитованная ИТ компания. Наша команда - 500+ счастливых сотрудников, это микс талантов, где каждый член важен, как ключевой элемент в коде. Мы создаем решения для крупнейшей e-commеrce компании в России - ВсеИнструменты.ру. "ВсеИнструменты.ру" – крупнейший интернет-магазин по продаже товаров для дома, дачи, строительства и ремонта. О нас в цифрах: • 20 лет развития, роста и результата; • ТОП 6 сайтов категории Home and Garden в мире по Similarweb; • ТОП 30 лучших IT-работодателей России на Хабр Карьере; • 950+ магазинов - мы самая большая DIY-сеть в России; • 1,5 млн. товаров на сайте; • 1,78 млн. уникальных посетителей сайта ежедневно; • 8 место среди интернет-магазинов России по Data Insight Сейчас мы ищем Data Engineer Мы ищем инженера, который будет развивать корпоративную платформу данных и DWH компании: модернизировать ETL-ландшафт, переводить процессы с SSIS на Apache Airflow 3 и внутренний Python-фреймворк, а также делать работу с данными надежнее и удобнее для аналитических команд. Какие задачи тебя ждут: • Развивать корпоративную платформу данных и DWH; • Переводить существующие ETL-процессы с SSIS на Apache Airflow 3 и внутренний YAML-driven Python-фреймворк; • Разрабатывать и поддерживать надежные data-пайплайны; • Обеспечивать стабильную промышленную эксплуатацию: retry, backfill, идемпотентность, дедупликацию и корректную обработку сбоев; • Развивать проверки качества данных; • Оптимизировать SQL и работу с Microsoft SQL Server; • Развивать CI/CD-процессы для работы с данными; • Создавать переиспользуемые инструменты и self-service решения для аналитических команд; • Участвовать в развитии архитектуры DWH и подходов к моделированию данных. Твоя суперсила: • Опыт работы Data Engineer от 3 лет; • Уверенный SQL и практический опыт работы с Microsoft SQL Server; • Python: ООП, модульная архитектура, type hints, тестирование, логирование, работа с REST API и БД; • Опыт работы с Apache Airflow или другим промышленным оркестратором; • Опыт работы с dbt или аналогичным SQL transformation framework; • Понимание ETL/ELT, batch- и near-real-time-обработки; • Умение строить надежные и отказоустойчивые data-пайплайны; • Опыт Git и CI/CD; • Опыт реализации Data Quality-проверок; • Понимание архитектуры DWH и организации слоев данных; • Знание подходов к моделированию данных: Kimball, Inmon, Data Vault, Anchor Modeling. С нас: • Возможность влиять на продукт, мы всегда открыты к новым идеям и обратной связи; • Возможность быть эффективным в любой точке мира, мы работаем удаленно, но это не мешает нам быть командой (при желании, можно работать из офиса - Москва, Нижний Новгород, Ковров, Владимир); • Дружелюбная атмосфера и открытость к новым знаниям, мы общаемся на "ты", устраиваем внутренние митапы, выступаем на конференциях, делимся опытом; • Возможность стать амбассадором ИТ бренда, у нас есть деврел :) • Счастливая и вовлеченная команда – держим высокий показатель удовлетворенности сотрудников (eNPS); • Перфоманс ревью 2 раза в год с премией до двух окладов и описанные грейды; • Забота о здоровье - для тебя есть расширенный ДМС со стоматологией, а семью можно подключить со скидкой; • Комфортное рабочее место - выдаем технику или можешь работать на своей.