Нейросеть GPT-3 оказалась лучше людей в тестировании на ассоциативное мышление. Исследование об этом от психологов из Калифорнийского университета появилось в журнале Nature Human Behaviour.

Ученые использовали карточки из тестов Рейвена, разработанные для определения интеллектуального развития. На каждой из них расположено девять ячеек, сгруппированных по три. Во всех, кроме последней, изображена одна или несколько геометрических фигур. Задача испытуемого — понять, какая фигура должна быть в ней по ассоциации с другими рядами.

Слева – тест Рейвена для людей, справа — вариант теста для GPT-3 (верный ответ под номером семь)
Фото: Nature Human Behaviour
 Слева – тест Рейвена для людей, справа — вариант теста для GPT-3 (верный ответ под номером семь)

Так как нейросеть не умеет анализировать визуальную информацию, изображения заменили на наборы цифр. Результаты нейросети сравнили с ответами студентов, которые проходили оригинальный тест. В среднем GPT-3 на 20% процентов реже совершала ошибки, чем люди.

При этом авторы исследования пишут, что когда алгоритм совершал ошибки, они были теми же, которые совершал при прохождении теста человек.

Автор: Андрей Москвичев