Мы прогнали 11 нейросетей через 72 вопроса по российскому праву.…
Мы прогнали 11 нейросетей через 72 вопроса по российскому праву. Лучший балл — 69 из 100. Нормы называют почти все, а пункт практики Верховного Суда — у большинства меньше половины. Слабее всего — корпоративное право: средний балл 30.
Задания мы не публикуем: иначе модели можно подогнать под известные ответы. Открыты методика, баллы и разбор на примерах. Проверить свою модель можно по письму на info@lesto-ai.ru — прогоним закрытый набор и добавим строку в таблицу.
Результаты и методика: https://лесто.рф/benchmark
Задания мы не публикуем: иначе модели можно подогнать под известные ответы. Открыты методика, баллы и разбор на примерах. Проверить свою модель можно по письму на info@lesto-ai.ru — прогоним закрытый набор и добавим строку в таблицу.
Результаты и методика: https://лесто.рф/benchmark
Просмотры: 3