AI инженер (Observability)

Что предстоит делать

Andersen hiring a AI Engineer (Observability) для построения масштабируемой AI-инфраструктуры и решений observability для облачной платформы, обеспечивая надежную производительность и интеллектуальный мониторинг системы. Заказчик — международная компания, предоставляющая профессиональные и технологические решения, которые поддерживают эффективное сотрудничество, структурированную коммуникацию и операционную эффективность для организаций. Она работает в быстрорастущей среде, фокусируясь на масштабируемости, безопасности и постоянном совершенствовании, разрабатывая цифровые платформы, используемые разнообразными клиентами по всему миру. Проект направлен на улучшение безопасной облачной платформы управления советами директоров с интуитивно понятными инструментами для встреч, совместной работы в реальном времени и расширенной аналитикой. Он также включает создание и поддержку масштабируемой AI-инфраструктуры, шаблонов оркестрации и observability для обеспечения надежной и интеллектуальной производительности платформы.

• Преобразование требований к продукту в AI-рабочие процессы и критерии качества.
• Проектирование, реализация и оптимизация промптов с использованием LangFuse.
• Создание оценочных наборов данных на основе реальных сценариев клиентов.
• Установка контрольных точек качества и систем измерения (precision, recall, accuracy).
• Настройка и поддержка LangFuse для observability и экспериментов с промптами.
• Настройка рабочих процессов на основе производственной телеметрии и результатов оценки.
• Сотрудничество с отделами Product и QE по критериям приемки и стратегии тестирования.
• Обязательные требования:
• Опыт работы в разработке ПО от 5 лет, включая поставку production-систем.
• Степень бакалавра в области компьютерных наук, инженерии, IT или эквивалентный опыт.
• Опыт работы с функциями на базе LLM или AI-пайплайнами (инструментация, оценка или мониторинг).
• Опыт работы с LLMOps и инструментами observability (например, Langfuse, Arize, W&B, LangSmith).
• Понимание RAG, prompt engineering, векторного поиска и фреймворков оркестрации (например, Semantic Kernel, LangChain).
• Опыт проектирования оценок LLM (наборы данных, скоринг, LLM-as-judge, регрессионное тестирование).
• Владение Python и/или C#/.NET, включая работу с production-кодовыми базами.
• Понимание основ observability (трассировка, логирование, метрики, оповещения) в облачных средах (например, OpenTelemetry, Azure Monitor).
• Опыт работы с CI/CD и Git-рабочими процессами, предпочтительно Azure DevOps.
• Понимание управления затратами LLM (отслеживание токенов, бюджетирование, оптимизация).
• Опыт работы в регулируемых средах (например, SOC 2, ISO 27001).
• Опыт работы с AI-ассистированными инструментами разработки (например, Claude Code, PlayerZero).
• Развитые коммуникативные навыки, включая умение объяснять инсайты и обучать команды качеству AI.
• Уровень английского языка — от Intermediate+ и выше.
• Желательно:
• Опыт работы с A/B-тестированием или фреймворками онлайн-экспериментов, применяемыми к AI-функциям.
• Знакомство с OpenTelemetry и его новыми применениями для трассировки LLM (OpenLLMetry или аналоги).
• Опыт мониторинга систем guardrail и контентной безопасности — включая отслеживание эффективности фильтров, соблюдение политик и аномалии, связанные с безопасностью, как отдельную задачу observability.
• Опыт работы с метриками семантического сходства, моделями эмбеддингов и платформами векторных баз данных (например, Azure AI Search, Pinecone, Qdrant).
• Опыт в QA-инженерии, data engineering или ML-инженерии, который формирует строгий подход к измерению качества.
• Опыт распространения практик observability или платформенных решений на несколько продуктовых линеек или команд.
• Причины, по которым эта работа будет вам интересна:
• Опыт работы в команде с лидерами в FinTech, Healthcare, Retail, Telecom и других отраслях. Andersen сотрудничает с такими компаниями, как Samsung, Siemens, Johnson & Johnson, BNP Paribas, Ryanair, Mercedes, TUI, Verivox, Allianz, T-Systems и др.
• Возможность сменить проект и/или развить экспертизу в интересной бизнес-области.
• Условия работы — вы можете работать как полностью удаленно, так и из офиса, или выбрать гибридный вариант.
• Гарантия профессионального, финансового и карьерного роста! В компании внедрены системы наставничества и адаптации для каждого нового сотрудника.
• Возможность дополнительного заработка до 1000 USD в месяц за участие в деятельности компании.
• Доступ к корпоративному обучающему порталу, где собрана вся база знаний компании и которая постоянно обновляется.
• Яркая корпоративная жизнь (вечеринки / дни пиццы / PlayStation / фрукты / кофе / снеки / кино).
• Компенсация сертификации (AWS, PMP и др.).
• Реферальная программа.
• Курсы английского языка.
• Частная медицинская страховка и компенсация занятий спортом.
• Присоединяйтесь к нам!