Старший Rust инженер

Что предстоит делать

<p>Мы ищем Senior Rust Engineer для присоединения к нашему клиенту — глобальной компании в сфере цифрового контента и знаний, чьи продукты помогают миллиардам людей по всему миру выйти за рамки простого доступа к информации и получить понимание, применение и экспертизу.</p><p>В роли Senior Rust Engineer вы присоединитесь к команде Content Library — команде, стоящей за единой платформой хранения и управления данными, которая обеспечивает работу контента во всех четырех продуктах. Платформа обрабатывает сотни миллиардов объектов в AWS S3 и обслуживает продукты, которыми пользуются сотни миллионов пользователей ежемесячно.</p><p>Вы будете работать над основной инфраструктурой в огромном масштабе: от низкоуровневых Rust-сервисов для хранения, трансформации и извлечения данных до уровня управления, отвечающего за происхождение данных (lineage), контроль доступа и удаление. Это глубоко практическая роль с полным владением задачами от начала до конца: вы будете работать бок о бок с архитектором и ведущим инженером платформы и помогать формировать техническое направление системы.</p><h3>Обязательные требования</h3><ul><li>6+ лет профессионального опыта в разработке ПО;</li><li>Уверенный продакшн-опыт работы с Rust;</li><li>Опыт работы с Apache Arrow — колоночная обработка данных в памяти;</li><li>Опыт работы с Apache Parquet — колоночный формат хранения;</li><li>Опыт работы с Apache DataFusion — движок выполнения запросов;</li><li>Уверенный опыт работы с PostgreSQL и/или MySQL;</li><li>Опыт работы с AWS S3 в больших масштабах;</li><li>Опыт работы с AWS Lambda;</li><li>Глубокое понимание распределенных систем и крупномасштабных систем хранения данных.</li></ul><h3>Будет большим плюсом</h3><ul><li>Опыт работы с Python;</li><li>Опыт работы с AWS ECS и Aurora;</li><li>Опыт работы с Terraform;</li><li>Опыт оптимизации выполнения запросов, кэширования, производительности баз данных и стоимости инфраструктуры;</li><li>Опыт работы с управлением данными, отслеживанием происхождения данных (lineage), контролем доступа или процессами удаления;</li><li>Опыт использования агентных AI-инструментов разработки, таких как Claude Code.</li></ul><h3>Обязанности</h3><ul><li>Проектировать, разрабатывать и развивать основные Rust-сервисы, отвечающие за хранение, трансформацию и извлечение контента;</li><li>Создавать и оптимизировать функциональность обработки данных с использованием Apache Arrow, Apache Parquet и Apache DataFusion;</li><li>Улучшать производительность выполнения запросов, стратегии кэширования, производительность баз данных и экономическую эффективность инфраструктуры;</li><li>Создавать и поддерживать уровень управления данными, включая происхождение данных (lineage), контроль доступа и распространение удаления;</li><li>Работать с средами объектного хранения больших масштабов, содержащими сотни миллиардов объектов AWS S3;</li><li>Вносить вклад в Python-based пользовательский слой и фреймворк трансформаций, используемый для кросс-командных contributions;</li><li>Владеть функциями от начала до конца: от технического проектирования и реализации до развертывания и производственной эксплуатации;</li><li>Улучшать наблюдаемость, надежность и операционное совершенство платформы Content Library;</li><li>Участвовать в дежурствах (on-call) и производственной эксплуатации;</li><li>Использовать агентные AI-инструменты как часть рабочего процесса разработки, сохраняя при этом высокий уровень человеческой ответственности за качество и решения по безопасности.</li></ul><h3>О проекте</h3><p>Content Library — это единая платформа хранения и управления контентом клиента для 4 крупных платформ электронных книг и аудиокниг.</p><p>Платформа управляет почти 20 годами накопленного контента, обрабатывает сотни миллиардов объектов в AWS S3 и поддерживает продукты, обслуживающие сотни миллионов пользователей ежемесячно.</p><p>Content Library решает несколько сложных инфраструктурных задач в огромном масштабе:</p><ul><li>Транзакционное хранение контента;</li><li>Трансформация наборов данных с отслеживанием происхождения (lineage);</li><li>Извлечение контента с низкой задержкой;</li><li>Контроль доступа и управление контентом;</li><li>Удаление контента и распространение удаления.</li></ul><p>Ядро платформы написано на Rust с использованием Apache Arrow, Apache Parquet и Apache DataFusion. Python-слой предоставляет пользовательскую среду и фреймворк трансформаций, позволяющий инженерам из других команд вносить вклад в платформу.</p><p>Команда придерживается модели полного владения функциями от начала до конца: инженеры участвуют в проектировании, реализации, развертывании, наблюдаемости и производственной эксплуатации.</p><p>Разработка также дополнена AI. Агентные инструменты разработки, такие как Claude Code, интегрированы в инженерный процесс, при этом инженеры несут ответственность за понимание, ревью и владение качеством и безопасностью того, что они выпускают.</p><p>Это возможность работать бок о бок с архитектором и ведущим инженером платформы, влиять на техническое направление Content Library и решать задачи распределенного хранения и обработки данных в значительном масштабе.</p><h3>Технологический стек</h3><ul><li>Основной язык: Rust;</li><li>Вторичный язык: Python;</li><li>Экосистема данных: Apache Arrow, Apache Parquet, Apache DataFusion;</li><li>Базы данных: PostgreSQL, Aurora, MySQL;</li><li>Объектное хранение: AWS S3;</li><li>Облако: AWS — S3, Lambda, ECS, Aurora;</li><li>Инфраструктура как код: Terraform;</li><li>AI-инструменты: агентные AI-инструменты разработки, включая Claude Code.</li></ul><h3>Состав команды</h3><p>Команда KITRUM: 17 инженеров, работающих в нескольких клиентских командах.</p><p>Инженерная организация на стороне клиента включает:</p><ul><li>Platform Engineering;</li><li>ML Infrastructure;</li><li>Infrastructure;</li><li>Big Data;</li><li>Payments;</li><li>Identity.</li></ul><p>В рамках этой позиции вы будете тесно работать с инженерами, отвечающими за платформу Content Library, включая архитектора и ведущего инженера платформы.</p><h3>Условия работы</h3><ul><li>График работы: требуется пересечение с EST <nobr>09:00–13:00.</nobr></li><li>Участие в программе дежурств (on-call). Круглосуточная ротация on-call распределяется между инженерами и происходит каждые три недели: одна неделя дежурства на каждого инженера.</li><li>Полная удаленная работа</li><li>Долгосрочный проект (12+ месяцев).</li></ul><h3>Процесс собеседования</h3><ul><li>HR-собеседование: первичное обсуждение с рекрутером <nobr>(30-45 мин.)</nobr></li><li>Техническое собеседование KITRUM (90 мин.)</li><li>Собеседования с клиентом:<br>— будут уточнены.</li></ul><h3>Почему вам понравится здесь работать</h3><ul><li>Конкурентоспособная оплата: мы предлагаем вознаграждение, отражающее ваши навыки и опыт;</li><li>Удаленная гибкость: работайте откуда угодно — наша команда распределена по всему миру;</li><li>Профессиональный рост: доступ к непрерывному обучению, включая оплачиваемые курсы, сертификацию, менторство;</li><li>Баланс работы и жизни: 30 дней оплачиваемого отпуска и 6 оплачиваемых больничных дней в год, а также гибкий график;</li><li>Инклюзивная культура: мы ценим разнообразие и поддерживаем культуру доверия, прозрачности и взаимного уважения;</li><li>Приятные бонусы: присоединяйтесь к нашим виртуальным командным мероприятиям, получите бюджет на обустройство домашнего офиса и доступ к эксклюзивному контенту и инструментам.</li></ul><p>📲 Если эта вакансия не для вас, но может идеально подойти другу или коллеге, поделитесь ею по этой <a href="https://kitrum.com/refer-a-friend/" target="_blank">ссылке</a> и получите вознаграждение за рекомендацию!</p> <div> <a href="https://jobs.dou.ua/companies/kitrum/vacancies/370506/#reply-btn-id">Відгукнутись на вакансію</a> </div>