Мы строим AI-сервисы для бизнеса на базе технологий Яндекса. Среди наших продуктов — Нейроюрист, Алиса Про и Нейросаппорт. Параллельно мы активно развиваем новые направления Нейросейлз и Нейробухгалтер. Ищем лида ML-аналитики, который поможет выстроить сильную функцию аналитики качества AI-сервисов.

Какие задачи вас ждут:

• Развитие аналитики качества LLM Основная часть работы связана с качеством AI-продуктов и ML-систем. Вам предстоит вместе с командами искать способы измерять качество моделей и AI-сценариев, строить систему метрик, улучшать процессы оценки и помогать командам быстрее и безопаснее запускать изменения.

• Построение процессов ML-аналитики Нужно будет выстроить понятные процессы вокруг оценки качества: от ручной разметки и продуктовых исследований до LLM-as-a-judge и автоматических проверок.

• Работа с несколькими сервисами одновременно Вам предстоит помогать AI-продуктам и новым гипотезам: Нейроюристу, Алисе Про, Нейросаппорту, Нейросейлзу и др. Нужно будет уметь быстро переключаться между задачами, видеть общие паттерны и переносить лучшие практики между командами.

• Управление командой и её развитие Вы будете нанимать и развивать ML-аналитиков, помогать им расти и формировать сильную инженерно-продуктовую культуру вокруг аналитики качества AI.

Мы ждём, что вы: • Руководили аналитиками, ML-аналитиками или quality-направлениями • Умеете строить метрики качества для AI-систем • Уверенно владеете SQL и Python

Будет плюсом, если вы: • Работали с LLM-as-a-judge, synthetic data или автоматическими evals • Строили ML-метрики или платформы оценки качества • Умеете работать с AI-ассистентами, RAG-системами или агентами • Понимаете специфику B2B- и enterprise-AI-продуктов

Почему у нас классно: ДМС Яндекса действует с первого месяца работы. Причём получить плановую или неотложную помощь можно и за рубежом — так что можно не бояться путешествовать. Это не все бонусы — полный список тут.

📩 Откликайтесь на вакансию на нашем сайте

#браузер #ML #LLM #AI #SQL #python #аналитика