Яндекс (Поисковый портал) · Москва (м. Парк культуры), Санкт-Петербург ·
Analyst-developer on Yandex's R&D team working to make the Alice AI assistant smarter: designing quality metrics for LLM/multimodal models, building expert data-collection and annotation pipelines for fine-tuning and RL, and tracking current research. Core tools are YQL, Python, Nirvana, Toloka, and statistics.
Yandex · Москва
Наша команда отвечает за качество ключевых технологий Яндекса: это распознавание и синтез речи, перевод, генерация изображений, большие языковые и мультимодальные модели. Сейчас перед нами стоит сложнейшая задача — сделать так, чтобы нейросеть Алиса стала самой умной и полезной. Для этого мы создаём метрики качества, собираем и проверяем данные, чтобы улучшать модели, и выстраиваем процессы разметки с участием экспертов.
Ждём талантливых аналитиков, готовых вместе с нами искать ответы и развивать технологии для миллионов пользователей в мире, где каждый день появляются всё более умные модели и новые подходы.
Развитие навыков моделей
Вам предстоит развивать самые разные навыки моделей — от агентности и умения писать код до решения и объяснения школьных задач и работы с файлами на сотни страниц.
Оценка качества наших моделей и моделей конкурентов
Вы будете придумывать и внедрять сложные метрики, которые объективно отражают реальный уровень технологий.
Выстраивание процессов сбора данных для fine-tuning и RL
Нужно будет работать с экспертами-разметчиками над созданием сложных сигналов, ускорять разметку с помощью LLM.
Изучение актуальных исследований
Вам предстоит анализировать новые бенчмарки, датасеты, подходы к сбору данных, выделять самое полезное и внедрять в нашу работу.
Yandex · Москва