Старший инженер Data Platform

Что предстоит делать

<p>Мы ищем высококвалифицированного Senior Data Platform Engineer, который присоединится к нашей команде Data Platform и сыграет ключевую роль в проектировании, создании и развитии инфраструктуры данных компании.</p><p>Это практическая инженерная позиция, ориентированная на разработку масштабируемых data-платформ, высоконагруженных пайплайнов приёма данных и базовых систем данных, которые обеспечивают аналитику, продуктовые приложения, AI-нагрузки и выполнение моделей в больших масштабах. Вы поможете проектировать наш data lake, создавать надёжные возможности приёма данных в масштабе и формировать ключевую инфраструктуру, поддерживающую будущий рост компании.</p><p>Это захватывающая возможность работать с передовыми технологиями и оказать определяющее влияние на архитектуру и развитие нашей data-платформы.</p><h3>Требования:</h3><ul><li>5+ лет опыта на позиции Data Platform/Infra Engineer</li><li>Подтверждённый опыт создания и эксплуатации масштабируемой инфраструктуры данных, в частности в архитектурах Data Lake.</li><li>Подтверждённый опыт проектирования и эксплуатации крупномасштабных нагрузок по обработке данных в Kubernetes, включая автомасштабирование нагрузок с помощью KEDA.</li><li>Уверенное владение Python и SQL. </li><li>Практический опыт работы с Infrastructure as Code, предпочтительно Terraform.</li><li>Опыт управления платформой оркестрации данных, такой как Airflow или Prefect</li><li>Опыт работы со Snowflake.</li></ul><h3>Обязанности:</h3><ul><li>Создавать сложные высоконагруженные сервисы пакетного и near-real-time приёма данных, одновременно помогая развивать streaming-возможности платформы.</li><li>Проектировать и внедрять решения для данных под все требования приложений в распределённой микросервисной среде</li><li>Разрабатывать и оптимизировать крупномасштабные пайплайны данных для пакетных и streaming-сценариев.</li><li>Обеспечивать качество данных, комплаенс и управление данными.</li><li>Управлять инфраструктурой Kubernetes и оптимизировать её, используя KEDA для динамического масштабирования ресурсов под крупномасштабные нагрузки по обработке данных.</li><li>Отвечать за полный жизненный цикл нашего data stack с использованием Terraform и Kubernetes — от провижининга до фреймворков уровня приложений.</li><li>Обеспечивать техническое руководство для команды, продвигать лучшие практики в области инфраструктуры, CI/CD, тестирования и проектирования систем.</li><li>Глубоко погружаться в управление памятью и тюнинг производительности, чтобы наши крупномасштабные распределённые системы были одновременно экономичными и молниеносно быстрыми.</li></ul><h3>Что мы предлагаем:</h3><ul><li>Комфортная среда, интересные задачи и долгосрочный интересный проект;</li><li>Бронирование от мобилизации доступно после успешного прохождения испытательного срока (для украинских коллег).</li><li>20 дней оплачиваемого отпуска;</li><li>Работа с первоклассным оборудованием;</li><li>Ведение бухгалтерии профессиональным бухгалтером;</li><li>Помощь и поддержка от нашей заботливой HR-команды;</li></ul> <div> <a href="https://jobs.dou.ua/companies/globaldevgroup/vacancies/373341/#reply-btn-id">Откликнуться на вакансию</a> </div>