NLP Engineer в команду коннекторов Алисы
Yandex · Москва, Минск ·
- Category
- ML ai
- Company size
- 1000+
Build and improve Yandex.Alice’s agentic LLM capabilities, integrating it with real services to handle multi-step user tasks reliably and safely.
Наша команда учит Алису работать с реальными сервисами. Мы ищем инженера, который будет расширять функциональность и агентскую свободу действий Алисы, чтобы люди с её помощью решали рутинные и даже сложные задачи в несколько запросов. У нас широкий и разнообразный скоуп задач — будет интересно!Развивать модель
Вам предстоит повышать автономность модели: развивать масштабируемые подходы к обучению и методики измерения качества агентного поведения. Также вы будете тюнить и оптимизировать поведение модели: анализировать ошибки на реальном трафике и закрывать их через SFT, DPO и RLHF. Развивать инструментарий для LLM
Вы будете развивать интерфейсы вызова внешних инструментов, RAG-пайплайны, работу с длинным контекстом. Интегрировать Алису с сервисами
Предстоит разрабатывать коннекторы к Почте, Диску, Календарю, внутренним и внешним сервисам. Проектировать многошаговые агентные пайплайны
Вашими задачами будут планирование, декомпозиция задач, обработка ошибок и восстановление после сбоев. Участвовать в построении системы оценки качества
Нужно будет работать с офлайн-метриками, reward-моделями, разметкой и человеческой оценкой. Больше об ML в Яндексе — в канале Yandex for ML* Уверенно владеете deep learning и NLP — понимаете, как устроены современные языковые модели * Имеете практический опыт работы с LLM: занимались дообучением, построением пайплайнов, оценкой качества * Выводили агентные или LLM-решения в продакшн и отвечали за их качество в нём
Вам предстоит повышать автономность модели: развивать масштабируемые подходы к обучению и методики измерения качества агентного поведения. Также вы будете тюнить и оптимизировать поведение модели: анализировать ошибки на реальном трафике и закрывать их через SFT, DPO и RLHF. Развивать инструментарий для LLM
Вы будете развивать интерфейсы вызова внешних инструментов, RAG-пайплайны, работу с длинным контекстом. Интегрировать Алису с сервисами
Предстоит разрабатывать коннекторы к Почте, Диску, Календарю, внутренним и внешним сервисам. Проектировать многошаговые агентные пайплайны
Вашими задачами будут планирование, декомпозиция задач, обработка ошибок и восстановление после сбоев. Участвовать в построении системы оценки качества
Нужно будет работать с офлайн-метриками, reward-моделями, разметкой и человеческой оценкой. Больше об ML в Яндексе — в канале Yandex for ML* Уверенно владеете deep learning и NLP — понимаете, как устроены современные языковые модели * Имеете практический опыт работы с LLM: занимались дообучением, построением пайплайнов, оценкой качества * Выводили агентные или LLM-решения в продакшн и отвечали за их качество в нём