Комментарии
7
ИИ-модель Microsoft превзошла результат человека в тесте на понимание естественного языка SuperGLUE
Несмотря на то, что модель DeBERTa превзошла человеческие показатели в тесте SuperGLUE, это не означает, что ИИ-модель достигла уровня человека в понимании естественного языка.Скажите, Шура, а теперь всегда хабровские статьи об ИИ будут содержать словесные конструкции типа «да — это нет» и «превзошел, но не достиг»? С какой цель придумываются тесты с названиями вводящими в заблуждение 99.9% читателей?
С целью привлечь внимание громким заголовком.
Это просто очередной ИИ эффект.
https://en.m.wikipedia.org/wiki/AI_effect
"AIS researcher Rodney Brooks complains: "Every time we figure out a piece of it, it stops being magical; we say, 'Oh, that's just a computation.'"
Очень нормальный такой результат. Вполне себе это самое…
SuperGLUE
Скоро ИИ дойдёт до "Момента"...
А моделькой поделятся...
Кому интересно пред-обученные модели доступны по ссылке.
А ошибка метрики сколько? И что на других данных?
В общем, это все еще только первые прикидки...
Только полноправные пользователи могут оставлять комментарии. Войдите, пожалуйста.
ИИ-модель Microsoft превзошла результат человека в тесте на понимание естественного языка SuperGLUE