Snowflake Data Engineer
Ищем опытного Snowflake Data Engineer для работы над проектом в фармацевтической сфере. Вы будете проектировать и оптимизировать пайплайны данных, работать с облачными платформами AWS, Azure и GCP, а также внедрять современные практики управления данными. Требуется 5+ лет опыта, глубокое знание Snowflake, SQL, ETL/ELT и Python.
Зарплата не указана — оценили по рынку
На основе 323 похожих вакансий за 90 дней.
Что предстоит делать
<ul><li><strong>Описание проекта:<br></strong><a href="https://luxhire.luxoft.com/hr/browse/HR-17214099" target="_blank"></a>Проект реализуется для одной из всемирно известных научно-технических компаний в фармацевтической отрасли, поддерживающей инициативы в области AWS, AI и Data Engineering, с планами запустить более 20 дополнительных инициатив в будущем. Модернизация инфраструктуры данных путем перехода на Snowflake является приоритетом, так как это расширит возможности для внедрения передовых AI-решений и откроет множество возможностей для инноваций и роста.<br><br>Мы ищем высококвалифицированного Snowflake Data Engineer для проектирования, создания и оптимизации масштабируемых конвейеров данных и облачных решений на платформах AWS, Azure и GCP. Идеальный кандидат обладает глубокими знаниями Snowflake, ETL-инструментов, таких как DBT, Python, инструментов визуализации, таких как Tableau, и современных практик CI/CD, а также глубоким пониманием управления данными, безопасности и управления доступом на основе ролей (RBAC). Знание методологий моделирования данных (OLTP, OLAP, Data Vault 2.0), фреймворков качества данных, разработки приложений Streamlit, интеграции с SAP и инфраструктуры как кода с помощью Terraform является обязательным. Опыт работы с различными форматами файлов, такими как JSON, Parquet, CSV и XML, высоко ценится.</li><li><strong>Обязанности:<br></strong><a href="https://luxhire.luxoft.com/hr/browse/HR-17214099" target="_blank"></a>• Глубокое знание возможностей Snowflake как хранилища данных.<br>• Понимание архитектуры виртуальных складов Snowflake и способов оптимизации производительности и стоимости.<br>• Владение функциями обмена данными и интеграции Snowflake для бесшовного сотрудничества.<br>• Разработка и оптимизация сложных SQL-скриптов, хранимых процедур и трансформаций данных.<br>• Тесное взаимодействие с аналитиками данных, архитекторами и бизнес-командами для понимания требований и предоставления надежных решений для работы с данными.<br>• Внедрение и поддержка моделей данных, размерного моделирования для хранилищ данных, витрин данных и схем «звезда»/«снежинка» для поддержки отчетности и аналитики.<br>• Интеграция данных из различных источников, включая API, плоские файлы, реляционные базы данных и облачные сервисы.<br>• Обеспечение соблюдения стандартов качества данных, управления данными и соответствия требованиям.<br>• Мониторинг и устранение проблем с производительностью, ошибок и сбоев конвейеров в Snowflake и связанных инструментах.<br>• Участие в ревью кода, тестировании и развертывании решений для работы с данными в средах разработки и production.</li><li><strong>Обязательные требования:<br></strong><a href="https://luxhire.luxoft.com/hr/browse/HR-17214099" target="_blank"></a>• Опыт работы от 5 лет<br>• Отличное владение Snowflake (Snowpipe, RBAC, настройка производительности).<br>• Умение писать сложные SQL-запросы, хранимые процедуры и пользовательские функции.<br>• Навыки оптимизации SQL-запросов для повышения производительности и эффективности.<br>• Опыт работы с ETL/ELT-инструментами и методами, включая Snowpipe, AWS Glue, OpenFlow, Fivetran или аналогичные инструменты для обработки данных в реальном времени и по расписанию.<br>• Владение трансформацией данных в Snowflake с помощью SQL, знание Python будет преимуществом.<br>• Глубокое понимание безопасности данных, соответствия требованиям и управления данными.<br>• Опыт работы с DBT для моделирования и предоставления объектов базы данных.<br>• Опыт работы с системами контроля версий, в частности Azure DevOps.<br>• Хорошие навыки документирования и наставничества.</li><li><strong>Желательные навыки:<br></strong><a href="https://luxhire.luxoft.com/hr/browse/HR-17214099" target="_blank"></a>— опыт работы с AWS Lambda, особенно в части использования Python для разработки функций извлечения данных.<br>— возможность извлекать данные из таких платформ, как SharePoint или Salesforce, и передавать их в S3-бакет.</li><li><strong>Языки:</strong><br><div><br><ul><li>Английский: B2 Upper Intermediate</li></ul></div></li></ul> <div> <a href="https://jobs.dou.ua/companies/luxoft/vacancies/363376/#reply-btn-id">Откликнуться на вакансию</a> </div>
Стек и инструменты
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Ещё в Luxoft
5 активных вакансий в компании
Разработчик ПО для GPU и HPC
Разработка и оптимизация ПО для GPU и высокопроизводительных вычислений на C++. Требуется опыт работы с ядрами и deep learning. Предлагается работа в сфере HPC.
C++ разработчик (с опытом в физике)
Ищем C++ разработчика с опытом в физике. Вы будете заниматься разработкой ПО, работать в команде и применять физические знания для решения задач. Требуется знание английского и русского языков.
Разработчик Go и React
~1 497 300 – 2 376 150 ₸ оценка
Разработка корпоративных приложений на Go и React с облачными решениями. Требуется опыт в бэкенде и фронтенде. Компания Luxoft предлагает удаленную работу или релокацию в Сербию.
Старший Java разработчик
~2 278 500 – 3 687 330 ₸ оценка
Ищем опытного Senior Java разработчика для работы над масштабируемой облачной платформой управления данными в международном банке. Требуется глубокое знание Java, Big Data (Hadoop, Spark) и опыт работы с распределенными системами. Предлагается работа в сильной команде, возможность развиваться в области больших данных и использовать ресурсы крупной организации.
Похожие вакансии
6 вакансийСтарший Data Engineer
~3 108 588 – 4 054 680 ₸ оценка
Старший инженер данных будет проектировать и поддерживать масштабируемые ETL/ELT-конвейеры и облачную архитектуру данных (AWS, Azure). Требуется 5+ лет опыта, глубокие знания SQL и облачных платформ. Компания предлагает удаленную работу, гибкий график и возможности для роста.
Web-аналитик
~3 108 588 – 4 054 680 ₸ оценка
Ищем опытного Web-аналитика для управления данными о поведении пользователей на сайте. Требуется глубокое знание Яндекс.Метрики и GTM, уверенный SQL и Python, опыт в A/B тестировании и повышении конверсии. Предлагается работа в финтехе или e-commerce с возможностью внедрения ML/AI решений.
ML-инженер (NLP/LLM)
~3 108 588 – 4 054 680 ₸ оценка
Ищем опытного ML-инженера для работы над NLP и LLM моделями. Требуется глубокое знание PyTorch, Huggingface, опыт оптимизации на GPU и развертывания моделей в продакшн. Предлагаем удаленную работу, гибкий график и возможности профессионального роста.
Старший Software / ML инженер
~1 582 815 ₸ оценка
Старший инженер будет разрабатывать ядро системы планирования рабочего графика: создавать модели ограничений и стоимости на основе трудовых норм и бизнес-правил. Требуется сильный опыт в Python и C#, понимание алгоритмов и машинного обучения. Предлагается удаленная работа, высокая степень ответственности и техническая автономия.
IT Бизнес-аналитик (AI и автоматизация)
~3 108 588 – 4 054 680 ₸ оценка
Ищем опытного IT Бизнес-аналитика для работы с AI и автоматизацией. Вы будете анализировать бизнес-процессы, выявлять возможности для оптимизации с помощью AI, писать требования и документацию, а также выступать связующим звеном между бизнесом и техническими командами. Требуется 5+ лет опыта в IT-аналитике и знание AI/ML. Предлагаем полностью удаленную работу и конкурентную зарплату.
Основатель AI Platform Engineer
Ищем опытного инженера для создания и поддержки инфраструктуры ML и GenAI продуктов. Нужно будет строить системы для обучения, развертывания и мониторинга моделей, улучшать CI/CD и обеспечивать надежность сервисов. Требуется сильный бэкенд-опыт, Python и облачные технологии, плюсом будет опыт в MLOps.