Ведущий инженер данных (Principal Data Engineer)

Что предстоит делать

В Vomela наш главный актив — это наши люди. Как компания, предоставляющая полный спектр услуг в области визуальных коммуникаций, мы ищем творческих и интеллектуальных специалистов, которые работают с нашими клиентами над созданием убедительных брендовых решений и установлением значимых связей. И пока вы сосредоточены на создании масштабных проектов для глобальных и локальных брендов, мы поможем вам построить карьеру, которая будет вызывать у вас страсть. Подайте заявку сейчас, чтобы найти свое место в Vomela. Диапазон оплаты: $180–200 тыс. USD Краткое описание должности Principal Data Engineer — это специалист самого высокого уровня в нашей команде инженеров данных: человек, который задает техническую планку, владеет платформой данных от начала до конца и выполняет работу, которую изучают другие. Вы будете определять и реализовывать стратегию работы с данными на инженерном уровне, выступая в роли технического острия копья в том, как организация строит, масштабирует и доверяет своим данным. Вы пишете production-код. Вы проектируете архитектуру. Вы решаете проблемы, которые блокируют всех остальных. Вы наставляете без просьб, влияете без полномочий и достигаете результатов без контроля. Вы — мультипликатор силы, и вы стремитесь формировать не только платформу, но и более широкую стратегию данных бизнеса. Microsoft Fabric — это наша платформа данных. Эта роль для человека, который по-настоящему вдохновлен экосистемой Fabric, внимательно следит за ее развитием и видит ее широту — Lakehouse, Event streams, Semantic models, Notebooks, Pipelines, Direct Lake — как возможность, а не ограничение. Если вы ищете роль, где ваше техническое суждение определяет траекторию развития всего отдела данных, то это именно она. Что вы будете делать... Проектировать и внедрять размерные модели, схемы «звезда» и схемы «снежинка» с высокой точностью Создавать и поддерживать семантические модели, которые служат единым источником истины для бизнес-отчетности Реализовывать стратегии медленно меняющихся измерений (SCD), подходящие для каждого домена Отвечать за инженерию мастер-данных: паттерны golden record, авторитетность источника записи, кросс-системное разрешение идентификаторов Устанавливать и обеспечивать соблюдение стандартов моделирования данных по всей команде Проектировать и эксплуатировать конвейеры реального времени и近реального времени с использованием стриминговых технологий (Kafka, Confluent Cloud, Fabric Eventstreams) — и понимать, когда стриминг является правильным решением, а когда нет Неуклонно снижать устаревание данных в нестриминговых сценариях за счет интеллектуального планирования, оптимизации инкрементальной загрузки и проектирования оркестрации конвейеров Отвечать за оптимизацию производительности во всем стеке: оптимизация запросов, стратегия партиционирования, индексирование, уплотнение Delta-таблиц, эффективность обновления семантических моделей и готовность к Direct Lake Применять дисциплину эксплуатационной инженерии: наблюдаемость конвейеров, оповещения, определение SLA, восстановление после сбоев и планирование мощностей Проектировать и внедрять средства контроля, подходящие для чувствительных данных (финансовые данные, PII, HIPAA и т. д.) Разработка ETL / ELT конвейеров Создавать надежные, масштабируемые и наблюдаемые конвейеры: инкрементальные загрузки на основе watermark, паттерны CDC, пакетные и стриминговые архитектуры Обеспечивать идемпотентность, восстанавливаемость и production-готовность конвейеров Выступать в роли старшего технического голоса на код-ревью — ваше одобрение имеет вес Предоставление отчетности и аналитики Трансформировать бизнес-требования в семантические модели и артефакты уровня отчетности, которым могут доверять и которые могут использовать нетехнические пользователи Выступать в роли основного технического интерфейса платформы для групп потребителей: разработчики Power BI отчетов, нуждающиеся в надежных, хорошо смоделированных семантических слоях; разработчики AI/ML, нуждающиеся в управляемых, готовых к использованию функциями поверхностях данных; разработчики приложений, потребляющие данные через SQL endpoints, REST API или Direct Lake Определять и обеспечивать соблюдение контрактов данных — стабильность схем, паттерны доступа, SLA — для каждого класса потребителей Отвечать за developer experience платформы: обнаруживаемость, документация и онбординг

Что ждём от вас

• Microsoft Fabric: Lakehouses, Notebooks, Dataflows Gen2, Event streams, Semantic Models, Direct Lake mode
• Power BI: разработка отчетов, проектирование датасетов/семантических моделей, владение DAX
• SQL Server / Azure SQL/Postgres: оптимизация запросов, проектирование схем, хранимые процедуры
• Azure DevOps: Git-ориентированные процессы разработки, CI/CD для конвейеров данных
• Подтвержденное использование AI-ассистентов по кодированию в production-процессе разработки
• Способность критически оценивать, редактировать и улучшать сгенерированный AI код и артефакты
• Четкое понимание того, где AI ускоряет работу, а где создает риски
• Предпочтительные квалификации
• Знакомство с более широким спектром сервисов данных Azure (Azure Data Factory, Synapse Analytics, ADLS Gen2, Event Hubs) как с дополнительными инструментами
• Опыт работы в среде портфельной компании, поддерживаемой частным акционерным капиталом, или в мультисубъектной компании
• Опыт работы с MDM-платформами (Profisee, Semarchy, Ataccama или аналогичными)
• Опыт работы с Confluent Cloud / Apache Kafka для стриминговой загрузки данных в Fabric или Synapse
• Знакомство с кросс-тенантной архитектурой Azure / Fabric
• Опыт в бизнес-анализе, архитектуре решений или pre-sales инжиниринге
• Сертификации Microsoft Fabric или Azure Data Engineer
• Медицинская страховка (стоматология и зрение)
• Пенсионный план (401k)
• Страхование жизни (базовое, добровольное и от несчастных случаев и увечий)
• Оплачиваемый отпуск
• Страхование по краткосрочной и долгосрочной нетрудоспособности
• Обучение и развитие
• Ресурсы для поддержания благополучия
• Пожалуйста, укажите слово **GENTLEST** и тег RMTYyLjU1LjQ2LjI1NQ== при подаче заявки, чтобы показать, что вы полностью прочитали описание вакансии (#RMTYyLjU1LjQ2LjI1NQ==). Это бета-функция для предотвращения спам-заявок. Компании могут искать эти слова, чтобы найти соискателей, которые прочитали описание, и убедиться, что они люди.