Data Engineer (PySpark, Databricks)
Ищем опытного Data Engineer (4+ года) для работы над проектом в страховой сфере. Нужно будет строить конвейеры обработки данных и аналитические решения на PySpark, Databricks и Azure. Компания предлагает гибкий формат работы, профессиональное развитие и хороший соцпакет.
Зарплата не указана — оценили по рынку
На основе 117 похожих вакансий за 90 дней.
Что предстоит делать
Мы ищем **Data Engineer** с сильным практическим опытом работы с **PySpark** и **Databricks** для присоединения к проекту в сфере страхования. Вы будете работать над созданием масштабируемых конвейеров обработки данных и комплексных решений для данных и аналитики с использованием Azure, PySpark, Databricks и Palantir Foundry. ### Обязанности: * Проектирование и разработка объектов данных и заданий по обработке данных в Azure Data Platform. * Проектирование и внедрение комплексных аналитических решений с использованием платформы Palantir Foundry, включая: различные типы источников данных и подключений к данным, масштабируемые конвейеры трансформации данных на PySpark. * Оптимизация и автоматизация заданий по обработке данных и конвейеров трансформации путем анализа логов и планов запросов, партиционирования и упрощения кода. * Обеспечение качества данных, безопасности (концепция доступа) и управления данными во всем потоке решения для данных и аналитики. * Сотрудничество с кросс-функциональными командами и заинтересованными сторонами для понимания и преобразования бизнес-требований в технические спецификации и практические планы, обеспечивая успешную реализацию. * Устранение неполадок и решение функциональных и технических проблем с данными для заинтересованных сторон, активный вклад в достижение общих целей и поддержка коллег в решении технических и аналитических задач. ### Требования: * 4+ года профессионального опыта в роли инженера данных. * Сильный практический опыт работы с заданиями/конвейерами трансформации данных и сложными решениями для данных и аналитики. * Экспертные знания Python/PySpark и опыт работы с фреймворками распределенных вычислений, такими как Spark. * Продвинутое владение SQL. * Владение Git. * Опыт работы с облачными платформами (Azure, AWS), особенно с Azure Databricks и Palantir Foundry, является значительным преимуществом. * Подтвержденная способность работать как с бизнес-, так и с техническими командами, поддерживая определение требований и проектирование решений. * Гибкое мышление (Agile) и практический опыт работы с Scrum или другими гибкими фреймворками; Azure DevOps будет плюсом. * Отличные коммуникативные навыки, проактивный подход и умение работать в команде. * Английский язык уровня B2 или выше. * Будет плюсом: знание REST API или Power BI. ### Наши преимущества: * **Профессиональный рост**: Индивидуальный план развития, менторство, компенсация затрат на профессиональную сертификацию и уроки английского языка, доступ к профессиональным курсам в корпоративной системе управления обучением. * **Комьюнити**: Техническое сообщество и мероприятия по обмену знаниями, разговорный английский клуб, корпоративная библиотека и книжный клуб, волонтерские и благотворительные инициативы. * **Благополучие**: Медицинская страховка, регулярные медицинские осмотры, компенсация спортивных занятий, оплачиваемый отпуск и больничные, поддержка ментального здоровья и мероприятия. * **Рабочая среда**: Полностью оборудованные офисы, современное оборудование, гибкий формат работы, мероприятия как в офисе, так и онлайн, Y-bucks и доступ к магазину Yalantis. Обратите внимание, что обратная связь по результатам рассмотрения вашего резюме будет предоставлена только в случае принятия решения о дальнейшем рассмотрении вашей кандидатуры. В противном случае ваши данные будут сохранены в базе резюме компании, и мы с радостью свяжемся с вами, если появится подходящая вакансия. Срок рассмотрения — 7 рабочих дней. Прежде чем отправить нам свое резюме, вы можете ознакомиться с нашей [Политикой конфиденциальности](https://yalantis.com/privacy-notice/). <div> <a href="https://jobs.dou.ua/companies/yalantis/vacancies/371994/#reply-btn-id">Відгукнутись на вакансію</a> </div>
Стек и инструменты
Подходит ли вам эта вакансия?
Зарегистрируйтесь и загрузите резюме — посчитаем % совпадения с этой вакансией, подсветим сильные стороны и что стоит подтянуть
Ещё в Yalantis
6 активных вакансий в компании
Старший Embedded инженер
~2 160 659 ₸ оценка по стеку
Старший Embedded-инженер для разработки прошивки носимого EEG-устройства для мониторинга эпилепсии. Нужен опыт с Nordic SoC, Zephyr RTOS, C/C++, BLE и низкопотребляющими системами. Работа в международной команде, гибкий формат, профессиональное развитие.
Data/BI инженер
~1 941 694 ₸ оценка по стеку
Ищем Data/BI инженера на фриланс для проекта в сфере женского здоровья. Нужно проектировать и поддерживать пайплайны данных, работать с Azure и Spark, писать SQL-запросы и готовить данные для BI-отчетности в Tableau. Требуется 3+ года опыта, уверенное знание SQL и Python, опыт с Azure Data Factory, Synapse, Databricks и DWH.
Старший Full-Stack инженер
~1 821 600 ₸ оценка по стеку
Старший Full-Stack инженер в американский HealthTech стартап, который автоматизирует административные процессы в клиниках с помощью AI. Нужно 5+ лет опыта, сильный TypeScript/Node.js, опыт с AWS, Next.js, React, LLM и голосовыми AI-агентами. Предлагают удаленную работу, профессиональное развитие и медицинскую страховку.
Python разработчик
~1 575 000 ₸ оценка по стеку
Ищем опытного Python-разработчика (от 5 лет) для работы над бэкенд-системами и API для клиента в сфере комплаенса. Требуется уверенное владение Python, опыт с AWS serverless (Lambda, DynamoDB и др.), микросервисами и REST API. Компания предлагает гибкий формат работы, медицинскую страховку, оплату обучения и курсов английского.
Похожие вакансии
6 вакансийСтарший Applied AI инженер
~2 823 480 ₸ оценка по стеку
VisiQuate, продуктовая компания в сфере healthcare-аналитики, ищет Senior Applied AI Engineer. Нужно проектировать и разрабатывать продакшн-системы с LLM: RAG-пайплайны, AI-агентов, интеграции с бэкендом. Требуется 7+ лет опыта в разработке на Java, Python, Go или C#, практический опыт с LLM и сильные бэкенд-навыки. Предлагают гибкий график, удалёнку или гибрид, бесплатные уроки английского и работу над реальными AI-решениями.
Data Engineer
~2 823 480 ₸ оценка по стеку
Data Engineer у SoftServe: розробка масштабованих хмарних дата-платформ на AWS, Snowflake, Python та dbt. Потрібен досвід 5+ років у Data Engineering, знання ELT-пайплайнів та Airflow. Пропонують гнучкий графік, конкурентну зарплату та розвиток.
Data Engineer
~2 823 480 ₸ оценка
Компания ищет опытного Data Engineer для проектирования и поддержки инфраструктуры данных. Нужно строить масштабируемые пайплайны, интегрировать источники и обеспечивать качество данных. Требуется 3+ года опыта, Python, SQL, DWH и ETL. Предлагают удаленную работу, оплату налогов для ФОП, отпуск и медстраховку.
Senior ML разработчик
~2 823 480 ₸ оценка
KTS ищет старшего ML-разработчика для работы над AI-проектами для крупных заказчиков: создание мультиагентных систем, AI-ассистентов и автоматизация процессов. Требуется 5+ лет опыта в ML и 3+ года в NLP, знание LLM и RAG. Компания предлагает удалённую или гибридную работу, ДМС и развитие в AI-направлении.
Data Scientist (ML/CV, Robotics)
~2 823 480 ₸ оценка по стеку
Swarmer, украинский оборонный стартап, разрабатывающий автономные дроны, ищет практикующего Data Scientist для работы над ML/CV пайплайнами в робототехническом стеке. Вы будете отвечать за обучение и оценку моделей, а также за инфраструктуру данных: от сбора и разметки до хранения и воспроизводимых экспериментов. Требуется сильный опыт в компьютерном зрении, Python и edge-развертывании, а также английский от Upper-Intermediate. Предлагают высокую ответственность, влияние на реальные боевые системы и конкурентоспособную компенсацию.
Solutions Architect
~2 823 480 ₸ оценка
Ищем опытного Solutions Architect для проектирования высоконагруженных ML-сервисов в финтех-проекте. Требуется опыт от 3 лет в архитектуре, знание Kubernetes, Kafka, GPU-инфраструктуры и LLM. Компания предлагает удалённую работу, обучение и соцпакет.