Специалисты Яндекса сравнили качество ответов YandexGPT 2 и GPT 3.5. По итогам исследования в 63 процентах случаев собственная языковая модель Яндекса отвечает на запросы лучше, чем нейросеть компании OpenAI, передает телеканал «Якутия 24» со ссылкой на пресс-службу Российской газеты.
Исследование проводилось методом сравнения Side by Side, обе нейросети отвечали на один и тот же запрос, а AI-тренеры выбирали лучший ответ, не зная, какая именно модель его сгенерировала. Список запросов сформировали из обезличенных обращений пользователей сервисов Яндекса к YandexGPT 2. Она учитывает реальные потребности людей и охватывает множество тем: история, образование, психология, здоровье и другие.
«Сравнения нейросетей нужны не для того, чтобы получить абстрактные цифры в бенчмарке, а для решения задач продукта, создания новых функций и развития бизнеса.Именно поэтому значительную часть корзины для сравнения составили настоящие запросы из наших сервисов», − приводятся слова технического директора Яндекс Поиска Алексея Гусакова.
Напомним, в этом году Яндекс запустила собственную нейросеть YandexGPT, которая умеет создавать и перерабатывать тексты, предлагать новые идеи и учитывает контекст беседы с пользователем. Она доступна в режиме Алисы «Давай придумаем». Также YandexGPT кратко пересказывает тексты статей из интернета в Яндекс Браузере и на 300.ya.ru, обобщает информацию из отзывов о товарах в Поиске и на Маркете, помогает создавать описания товаров продавцам Маркета и не только.
