Исследование: GPT-3 лучше людей справилась с ассоциативным тестом
При этом нейросеть делает ошибки, схожие с человеческими
Нейросеть GPT-3 оказалась лучше людей в тестировании на ассоциативное мышление. Исследование об этом от психологов из Калифорнийского университета появилось в журнале Nature Human Behaviour.
Ученые использовали карточки из тестов Рейвена, разработанные для определения интеллектуального развития. На каждой из них расположено девять ячеек, сгруппированных по три. Во всех, кроме последней, изображена одна или несколько геометрических фигур. Задача испытуемого — понять, какая фигура должна быть в ней по ассоциации с другими рядами.
Так как нейросеть не умеет анализировать визуальную информацию, изображения заменили на наборы цифр. Результаты нейросети сравнили с ответами студентов, которые проходили оригинальный тест. В среднем GPT-3 на 20% процентов реже совершала ошибки, чем люди.
При этом авторы исследования пишут, что когда алгоритм совершал ошибки, они были теми же, которые совершал при прохождении теста человек.
Автор: Андрей Москвичев