Впервые в истории GPT-4 успешно прошел тест Тьюринга.

18 июня, 2024

По данным Live Science, впервые GPT-4 успешно прошел тест Тьюринга, причем большинство участников исследования ошибочно приняли эту нейросеть за человека.

Ученые провели эксперимент, в ходе которого 500 человек общались с четырьмя «собеседниками» — человеком, программой ИИ ELIZA из 1960-х годов, GPT-3.5 и GPT-4. Длительность каждого разговора составляла пять минут, после чего участники должны были определить, говорили ли они с человеком или с искусственным интеллектом. Согласно результатам исследования, опубликованным на сервере arXiv, GPT-4 был ошибочно принят за человека в 54% случаев, в то время как ELIZA — всего лишь в 22% случаев. GPT-3.5 получил оценку 50%, а участник-человек — 67%.

Нейросети могут быть подвержены когнитивным предубеждениям и могут быть обмануты или манипулированы. Это означает, что современные системы искусственного интеллекта проявляют человеческие слабости и причуды, отличаясь от более ранних моделей с шаблонными ответами.

Ученые отмечают, что существуют обоснованные критические замечания относительно того, что тест Тьюринга слишком упрощен в своем подходе.