Middle Data Engineer

Что предстоит делать

<h3>О компании</h3><p><a href="http://CAS.AI" target="_blank">CAS.AI</a> — это универсальная платформа для монетизации и паблишинга мобильных игр, которая помогает разработчикам и студиям масштабировать приложения и максимизировать доход от рекламы. Компания сочетает современную технологию ad mediation с полноцикловым паблишингом, что позволяет партнёрам оптимизировать user acquisition, улучшать показатели эффективности и стабильно расти. </p><h3>О роли</h3><p>Мы расширяем Data team в связи с ростом компании. Ищем Middle Data Engineer, который будет помогать с разработкой и поддержкой DWH, миграцией данных и построением data pipelines.</p><h3>Чем будете заниматься</h3><ul><li>Участвовать в миграции DWH по модели bronze → silver → gold — разработка pipelines, которые объединяют данные из разных систем-источников в одну консистентную модель</li><li>Разрабатывать и поддерживать ingestion pipelines с учётом cost-aware guardrails с самого начала</li><li>Помогать с ре-платформингом ClickHouse в быстрый, read-optimized mart, который питается из gold layer хранилища</li><li>Строить автоматизированные проверки качества данных на границах слоёв (layer boundaries)</li><li>Эксплуатировать и решать проблемы production pipelines в нескольких бизнес-доменах</li><li>Строить надёжные ETL-процессы и поддерживать их SLA</li><li>Подключаться к кросс-доменным проектам, брать на себя ответственность за менее крупные задачи end-to-end</li><li>Писать документацию и runbooks, по которым команда сможет действовать без вашего присутствия</li></ul><h3>Что для нас важно</h3><ul><li>2+ года коммерческого опыта на позиции Data Engineer</li><li>Уверенный опыт работы с cloud data warehouse (BigQuery — сильное преимущество; Snowflake/Redshift также релевантны)</li><li>Сильный SQL и практический опыт с оркестрацией pipelines (Airflow или аналоги)</li><li>Опыт построения data pipelines и работы с миграциями — schema design, backfills</li><li>Cost-conscious инженерное мышление — понимание стоимости запроса или pipeline ещё до того, как это станет неожиданностью в счёте</li><li>Готовность работать в разных доменах, а не владеть одной фиксированной зоной ответственности — это shared-pool команда, а не силосная структура</li></ul><h3>Будет плюсом</h3><ul><li>Опыт с pub/sub или streaming ingestion паттернами (Pub/Sub, Kafka, Kinesis или подобные)</li><li>Опыт работы с ClickHouse или другим OLAP engine</li><li>Знакомство с dbt или подобным transformation framework</li><li>Опыт в cost optimization/FinOps или лёгких data governance фреймворках</li><li>Опыт менторства или кросс-обучения коллег</li><li>GCP / AWS сертификация</li></ul> <div> <a href="https://jobs.dou.ua/companies/cas-ai/vacancies/373955/#reply-btn-id">Откликнуться на вакансию</a> </div>