Старший Data Engineer

Что предстоит делать

<p>Присоединяйся к масштабному проекту в сфере кибербезопасности, направленному на защиту приложений от автоматизированных атак и вредоносной активности. Мы ищем Senior Data Engineer, который уверенно работает самостоятельно, любит решать сложные технические задачи и готов(а) возглавлять инициативы по модернизации масштабируемых data systems.</p><p>Ты станешь ключевым участником небольшой, но инициативной инженерной команды, которая работает над масштабным продуктом в сфере кибербезопасности. Твоя работа будет предполагать детальное изучение существующих систем, включая устаревший программный код и взаимосвязанные сервисы, анализ их эффективности, выявление технических недостатков и внедрение важных улучшений.</p><p>Ты будешь тесно сотрудничать с командами разработки продукта, участвовать в принятии технических решений и работать как над оперативным совершенствованием существующих решений, так и над стратегическим развитием платформы.</p><p>Как часть Sigma Software, ты будешь сотрудничать с опытными международными командами и иметь возможность развивать масштабируемую data infrastructure для продуктов в сфере кибербезопасности, работающих на глобальном уровне. Мы ценим ответственность за результат, стратегическое мышление и техническую экспертизу. Создаём среду, в которой инженеры могут влиять на архитектурные решения, внедрять важные улучшения и профессионально развиваться.</p><h3>КЛИЕНТ</h3><p>Наш клиент — международная компания в сфере кибербезопасности, которая разрабатывает передовые решения для цифровой защиты бизнеса, организаций и сообществ по всему миру. Компания работает по разным направлениям кибербезопасности, сосредоточиваясь на выявлении уязвимостей, предотвращении угроз и повышении цифровой устойчивости благодаря масштабируемым и надёжным продуктам для защиты цифровой среды.</p><h3>ПРОЕКТ</h3><p>Проект сосредоточен на разработке и совершенствовании решения в сфере кибербезопасности, предназначенного для защиты приложений от автоматизированных атак и вредоносного трафика.</p><p>Команда разрабатывает и совершенствует высокопроизводительную инфраструктуру данных, которая обеспечивает аналитику кибербезопасности, мониторинг и выявление угроз. Работа сочетает модернизацию устаревших систем с разработкой надёжных и масштабируемых data workflows и предполагает высокий уровень самостоятельности и ответственности, а также тесное сотрудничество с командами разработки разных направлений.</p><p><strong>Ключевые технологии:</strong> Snowflake, DBT, SQL, Python, Elastic Stack, Airflow</p><h3>ОБЯЗАННОСТИ</h3><ul><li>Поддерживать и совершенствовать существующие процессы работы с данными, уделяя особое внимание их надёжности, масштабируемости и производительности.</li><li>Анализировать и детально исследовать существующие модели данных, рабочие процессы, таблицы и задачи по обработке данных.</li><li>Выявлять технические недостатки, узкие места, неэффективные процессы и возможности для совершенствования архитектуры.</li><li>Проектировать, оптимизировать и поддерживать масштабные data pipelines и процессы трансформации данных.</li><li>Инициировать и возглавлять проекты по модернизации платформы данных, участвуя в дальнейшем развитии её архитектуры.</li><li>Оптимизировать сложные SQL-запросы, снижать задержки и повышать эффективность обработки данных.</li><li>Сотрудничать с командами разработки продукта и специалистами других направлений по техническим решениям и подходам к их реализации.</li><li>Участвовать как в достижении краткосрочных целей разработки, так и в долгосрочном развитии платформы.</li><li>Обеспечивать соблюдение лучших практик в Data Engineering, в частности касательно надёжности систем и оптимизации производительности.</li><li>Участвовать в технических обсуждениях, проектировании решений и постоянном совершенствовании платформы.</li></ul><h3>ТРЕБОВАНИЯ</h3><ul><li>5+ лет коммерческого опыта в Data Engineering.</li><li>Экспертный уровень владения Python.</li><li>Экспертный уровень владения SQL и практический опыт оптимизации сложных запросов для повышения производительности и масштабируемости.</li><li>Основательный практический опыт работы с DBT для трансформации и моделирования данных.</li><li>Глубокое понимание принципов работы баз данных, в частности DDL, DML, indexing, normalization и advanced SQL techniques.</li><li>Практический опыт работы со Snowflake.</li><li>Опыт работы с Elastic Stack.</li><li>Подтверждённый опыт проектирования, разработки и поддержки масштабных data pipelines.</li><li>Сильные аналитические навыки и умение решать сложные технические задачи.</li><li>Способность самостоятельно работать в инженерной среде с высоким уровнем автономности.</li><li>Опыт ведения технических инициатив от идеи до реализации.</li><li>Развитые коммуникационные навыки и умение эффективно сотрудничать с командой.</li><li>Английский язык на уровне Upper-Intermediate или выше.</li></ul><h3>БУДЕТ ПРЕИМУЩЕСТВОМ</h3><ul><li>Опыт работы с Airflow для оркестрации рабочих процессов.</li></ul> <div> <a href="https://jobs.dou.ua/companies/sigma-software/vacancies/379661/#reply-btn-id">Откликнуться на вакансию</a> </div>