Чтобы оценить точность реплик нейросети, каждый участник исследования прошел два раунда личностных тестов, социальных опросов и логических игр, а через две недели его попросили повторить процесс. Когда реплики искусственного интеллекта прошли те же тесты, они совпали с ответами участников с точностью 85%.
Однако «симуляционные агенты» оказались не так идеальны. Они хорошо справлялись с воспроизведением ответов на личностные опросники и определением социальных установок, но были менее точны в прогнозировании поведения в интерактивных играх, связанных с принятием экономических решений. Исследователи объяснили, что ИИ обычно испытывает трудности с задачами, связанными с социальной динамикой и контекстуальными нюансами.
