Этот язык переведён машиной и не проверен человеком.

Наука · Статья

Теория психического: что это означает в психологии и почему исследователи ИИ спорят об этом

Опубликовано:

Коротко

Теория психического — это когнитивная способность приписывать себе и другим людям убеждения, желания и намерения, позволяющая предсказывать поведение даже когда восприятие реальности другого человека отличается от собственного. Концепция, долгое время изучавшаяся с помощью тестов развития детей, таких как задача Салли-Энн, вернулась в общественное обсуждение после того, как исследователь из Стэнфорда сообщил, что крупные языковые модели, такие как GPT-4, проходят многие из тех же тестов, однако другие ученые оспаривают это утверждение.

Эта версия — машинный перевод оригинала (English). Читать оригинал

Что означает теория психического в психологии

Теория психического (ToM) определяется как способность понимать других людей путем приписывания им психических состояний, согласно обзору концепции в Википедии. Она позволяет человеку признать, что кто-то другой может придерживаться убеждений, желаний или намерений, отличающихся от его собственных, и использовать это признание для предсказания или объяснения поведения.

Термин вошел в современные исследования благодаря статье Дэвида Премака и Гая Вудрафа 1978 года «Есть ли у шимпанзе теория психического?», которая побудила психологов изучать эту способность у разных видов и на протяжении детского развития, согласно Википедии. Позже появились две конкурирующие теории о том, как работает теория психического: «теория-теория», которая утверждает, что люди применяют правила народной психологии для умозаключений о состояниях других, и теория моделирования, которая утверждает, что люди мысленно моделируют других, воображая себя на их месте.

Задача Салли-Энн

Стандартный инструмент для тестирования теории психического у детей — это задача на ложное убеждение, чаще всего представляемая как история Салли-Энн: Салли кладет шарик в свою корзинку и покидает комнату; Энн затем перемещает шарик в коробку. Ребенок проходит тест, предсказав, что Салли будет искать шарик в корзинке — в ее исходном, теперь ложном убеждении, — а не там, где он находится на самом деле, как объясняет Википедия. Связанный вариант, задача на неожиданное содержимое, просит детей сказать, что, по их мнению, другой человек думает находится в коробке с вводящей в заблуждение этикеткой.

Дети обычно развивают эти способности в определенной последовательности в возрасте примерно трех-пяти лет, переходя от понимания того, что люди могут хотеть разные вещи, к пониманию того, что люди могут придерживаться разных убеждений, к прохождению полных тестов на ложное убеждение. Википедия отмечает, что точная последовательность варьируется по культурам: дети в Иране и Китае, например, понимают «доступ к знаниям» раньше, но дольше усваивают «различные убеждения», что исследователи связывают с коллективистскими культурными ценностями.

Почему искусственный интеллект вошел в дебаты

Интерес к теории психического машин возрос после того, как вычислительный психолог из Стэнфорда Михал Косинский провел те же задачи на ложное убеждение, которые используются для детей, через серию языковых моделей. По данным страницы рабочей бумаги Высшей школы бизнеса Стэнфордского университета, Косинский разработал 40 сценариев с ложными убеждениями, плюс соответствующие версии с истинными убеждениями для контроля, и протестировал их на языковых моделях, выпущенных между концом 2010-х и 2023 годом.

Производительность моделей GPT при выполнении задач на ложное убеждение, согласно странице рабочей бумаги Высшей школы бизнеса Стэнфордского университета
МодельПериод выпускаКоэффициент успеха (Высшая школа бизнеса Стэнфордского университета)Ближайший возрастной тест на детях
Модели до 2020 годадо 2020 годаблизко к 0%ниже типичного возраста тестирования
GPT-3май 2020около 40%дети ~3,5 года
GPT-3, обновленная версияянварь 2022около 70%дети ~6 лет
GPT-3.5ноябрь 2022около 90%дети ~7 лет
GPT-4март 2023около 95%приближающийся к уровню взрослого

Отдельный очерк исследования на PsyPost приводит различные цифры для того, что описывается как позднейший раунд тестирования, охватывающий 11 моделей: он сообщает, что варианты GPT-3 решают только около 20% задач, а «ChatGPT-4» решает 75% в целом, с разбиением в 90% на задачи неожиданного содержимого, но только 60% на более сложный вариант неожиданного переноса. Два источника описывают разные партии тестов и версии моделей, что является одной вероятной причиной несовпадения процентов; однако оба указывают на явное улучшение новых моделей по сравнению с более старыми.

ЛЯМ — это не просто языковые модели, они, по сути, модели человеческого разума.

— Михал Косинский, Высшая школа бизнеса Стэнфордского университета, цитируется PsyPost

Возражение: сопоставление с образцами или подлинное понимание?

Вывод Косинского не остался без возражений. Психолог из Гарварда Томер Уллман опубликовал статью на arXiv под названием «Крупные языковые модели не справляются с тривиальными изменениями задач на теорию психического», утверждая, что небольшие переформулировки, которые сохраняют одну и ту же основную психологическую логику, могут перевернуть ответ модели с правильного на неправильный. Позиция Уллмана, резюмированная в самой статье, заключается в том, что исследователи должны начинать со скептического базовой линии при оценке машинной психологии, и что рассеянные ошибки на почти идентичных задачах важнее среднего процента успеха.

Освещение исследования Стэнфорда в PsyPost также прямо указывает на это ограничение: поскольку модели GPT обучены на огромных объемах текста, который может включать похожие истории с ложными убеждениями, трудно исключить, что модель распознает знакомую схему, а не рассуждает о психическом состоянии невидимого персонажа. Исследователи попытались разработать новые сценарии для снижения этого риска, но в статье отмечается, что это не может быть полностью гарантировано.

Почему этот вопрос важен за пределами лаборатории

Одна и та же батарея тестов, используемая на детях и шимпанзе, теперь применяется к программному обеспечению, потому что, как отмечает страница Высшей школы бизнеса Стэнфордского университета, теория психического лежит в основе человеческого социального взаимодействия, общения, сопереживания, самосознания и морали. Однако материалы Стэнфорда и статья Уллмана согласны в том, что прохождение фиксированного набора тестовых вопросов не то же самое, что установление того, что система обладает теорией психического в том смысле, как когнитивные ученые используют этот термин применительно к людям.

Вопросы

Что такое теория психического в простых словах?
Это способность признавать, что у других людей есть собственные убеждения, желания и намерения, которые могут отличаться от ваших собственных, и использовать это для предсказания их поведения, как определено в обзоре теории психического в Википедии.
Что такое задача Салли-Энн?
Это задача на ложное убеждение, в которой ребенок должен предсказать, что персонаж по имени Салли будет искать предмет там, где она его оставила в последний раз, даже если другой персонаж по имени Энн тайно переместил его, пока ее не было, — тест на понимание того, что убеждения могут быть ложными, согласно Википедии.
Есть ли у GPT-4 теория психического?
Исследователь Стэнфорда Михал Косинский сообщил, согласно его странице рабочей бумаги и освещению PsyPost, что GPT-4 решает высокий процент классических задач на ложное убеждение. Однако другие исследователи, включая Томера Уллмана из Гарварда, в статье на arXiv утверждают, что это, вероятно, отражает сопоставление с образцами на основе данных обучения, а не подлинное рассуждение о психических состояниях.
В каком возрасте дети обычно проходят задачи на ложное убеждение?
Обзор Википедии указывает, что дети обычно развивают последовательность способностей, лежащих в основе теории психического, в возрасте примерно трех-пяти лет, точный порядок несколько варьируется в зависимости от культуры.
Почему критики сомневаются в результатах теории психического ИИ?
Статья Томера Уллмана на arXiv показывает, что небольшие переформулировки иначе эквивалентных задач на ложное убеждение могут привести к тому, что модель, которая ранее отвечала правильно, не справится, и он утверждает, что это указывает на зависимость от поверхностных образцов, а не на надежное рассуждение о психических состояниях других.

Источники

  1. Wikipedia — Theory of mind
  2. Stanford Graduate School of Business — Theory of Mind May Have Spontaneously Emerged in Large Language Models
  3. PsyPost — Stanford scientist discovers that AI has developed an uncanny human-like ability
  4. arXiv — Large Language Models Fail on Trivial Alterations to Theory-of-Mind Tasks (Ullman)

Этот материал подготовлен с помощью искусственного интеллекта и перед публикацией прошёл автоматическую проверку источников. Если вы заметили ошибку, запросите исправление. Запросить исправление или ответ · Как мы работаем

Похожие материалы