Questa lingua è tradotta automaticamente e non è stata revisionata da un essere umano.

Scienza · Articolo

Teoria della mente: cosa significa in psicologia e perché i ricercatori di IA ne stanno dibattendo

Pubblicato:

In breve

La teoria della mente è la capacità cognitiva di attribuire credenze, desideri e intenzioni a se stessi e ad altre persone, permettendo di fare previsioni sul comportamento anche quando la visione della realtà di un'altra persona differisce dalla propria. Il concetto, a lungo studiato attraverso test di sviluppo infantile come il compito Sally-Anne, è rientrato nel dibattito pubblico dopo che un ricercatore di Stanford ha riferito che i grandi modelli linguistici come GPT-4 superano molti degli stessi test, un'affermazione che altri scienziati contestano.

Questa versione è una traduzione automatica dell'originale (English). Leggi l'originale

Cosa significa la teoria della mente in psicologia

La teoria della mente (TdM) è definita come la capacità di comprendere altri individui attribuendo loro stati mentali, secondo la panoramica del concetto di Wikipedia. Consente a una persona di riconoscere che qualcun altro può avere credenze, desideri o intenzioni diverse dai propri, e di utilizzare questo riconoscimento per prevedere o spiegare il comportamento.

Il termine è entrato nella ricerca moderna con l'articolo del 1978 'Lo scimpanzé ha una teoria della mente?' di David Premack e Guy Woodruff, che ha spinto gli psicologi a studiare la capacità tra le specie e attraverso lo sviluppo infantile, secondo Wikipedia. Due spiegazioni rivali sono successivamente emerse su come funziona la TdM: la 'teoria-teoria', che sostiene che le persone applichino regole di psicologia popolare per inferire gli stati mentali altrui, e la teoria della simulazione, che sostiene che le persone modellino mentalmente gli altri immaginandosi al loro posto.

Il test Sally-Anne

Lo strumento standard per testare la TdM nei bambini è il compito di falsa credenza, presentato più spesso come la storia Sally-Anne: Sally mette una biglia nel suo cesto e lascia la stanza; Anne poi sposta la biglia in una scatola. Un bambino supera il test prevedendo che Sally cercherà la biglia nel cesto — la sua credenza originale, ora falsa — piuttosto che dove effettivamente si trova, come spiega Wikipedia. Una versione correlata, il compito di contenuto inaspettato, chiede ai bambini cosa pensano che qualcun altro crederà sia dentro una scatola etichettata in modo ingannevole.

I bambini sviluppano tipicamente queste capacità in una sequenza stabilita tra circa tre e cinque anni, passando dalla comprensione che le persone possono volere cose diverse, alla comprensione che le persone possono avere credenze diverse, al superamento di test completi di falsa credenza. Wikipedia nota che la sequenza esatta varia a seconda della cultura: i bambini in Iran e Cina, ad esempio, comprendono l'«accesso al sapere» prima ma impiegano più tempo a comprendere le 'credenze diverse', cosa che i ricercatori collegano ai valori culturali collettivisti.

Perché l'intelligenza artificiale è entrata nel dibattito

L'interesse per la teoria della mente delle macchine è cresciuto dopo che Michal Kosinski, psicologo computazionale di Stanford, ha sottoposto gli stessi compiti di falsa credenza utilizzati sui bambini a una serie di modelli linguistici. Secondo la pagina del preprint sul sito della Stanford Graduate School of Business, Kosinski ha costruito 40 scenari di falsa credenza, più versioni di controllo di credenza vera corrispondenti, e li ha testati su modelli linguistici rilasciati tra la fine degli anni 2010 e il 2023.

Prestazioni del modello GPT su compiti di falsa credenza, come riportato nella pagina del preprint di Stanford GSB
ModelloPeriodo di rilascioTasso di successo (Stanford GSB)Benchmark di età infantile più vicino
Modelli pre-2020prima del 2020vicino allo 0%al di sotto dell'età tipica di test
GPT-3maggio 2020circa 40%bambini di ~3,5 anni
GPT-3, versione aggiornatagennaio 2022circa 70%bambini di ~6 anni
GPT-3.5novembre 2022circa 90%bambini di ~7 anni
GPT-4marzo 2023circa 95%avvicinandosi al livello adulto

Un resoconto separato della ricerca su PsyPost fornisce cifre diverse per quello che descrive come un round successivo di test che copre 11 modelli: riferisce che le varianti di GPT-3 hanno risolto solo circa il 20% dei compiti, e 'ChatGPT-4' ha risolto il 75% complessivamente, con una divisione del 90% sui compiti di contenuto inaspettato ma solo il 60% sulla versione più difficile di trasferimento inaspettato. Le due fonti descrivono diversi lotti di test e versioni di modelli, il che è una probabile ragione per cui le percentuali non corrispondono; entrambe, tuttavia, indicano un chiaro miglioramento nei modelli più recenti rispetto a quelli più vecchi.

Gli LLM non sono meramente modelli linguistici—sono, essenzialmente, modelli della mente umana.

— Michal Kosinski, Stanford Graduate School of Business, citato da PsyPost

La controreplica: riconoscimento di pattern o vera comprensione?

La conclusione di Kosinski non è rimasta incontestata. Lo psicologo di Harvard Tomer Ullman ha pubblicato un articolo su arXiv intitolato 'Large Language Models Fail on Trivial Alterations to Theory-of-Mind Tasks', sostenendo che piccole riformulazioni che preservano la stessa logica psicologica sottostante possono far cambiare la risposta di un modello da corretta a scorretta. La posizione di Ullman, riassunta nel framework dello stesso articolo, è che i ricercatori dovrebbero iniziare da una linea di base scettica quando valutano la psicologia delle macchine, e che i fallimenti sparsi su compiti quasi identici contano più di un tasso di successo medio.

La copertura di PsyPost della ricerca di Stanford segnala anche direttamente questa limitazione: poiché i modelli GPT sono addestrati su enormi quantità di testo che possono includere storie di falsa credenza simili, è difficile escludere che un modello stia riconoscendo un pattern familiare piuttosto che ragionare sullo stato mentale di un personaggio non visto. I ricercatori hanno tentato di progettare nuovi scenari per ridurre questo rischio, ma l'articolo nota che questo non può essere completamente garantito.

Perché la domanda importa al di là del laboratorio

La stessa batteria di test utilizzata su bambini e scimpanzé viene ora applicata al software perché, come nota la pagina di Stanford GSB, la teoria della mente è centrale per l'interazione sociale umana, la comunicazione, l'empatia, l'autocoscienza e la moralità. Tuttavia, sia il materiale di Stanford che l'articolo di Ullman concordano sul fatto che superare un insieme fisso di domande di test non è la stessa cosa che stabilire che un sistema possiede la teoria della mente nel modo in cui gli scienziati cognitivi usano il termine per gli umani.

Domande

Cosa è la teoria della mente in termini semplici?
È la capacità di riconoscere che altre persone hanno le loro proprie credenze, desideri e intenzioni, che possono essere diversi dai propri, e usarlo per prevedere il loro comportamento, come definito nella panoramica della teoria della mente di Wikipedia.
Cos'è il test Sally-Anne?
È un compito di falsa credenza in cui un bambino deve prevedere che un personaggio chiamato Sally cercherà un oggetto dove l'ha lasciato per ultimo, anche se è stato segretamente spostato da un altro personaggio, Anne, mentre era via — un test della comprensione che le credenze possono essere false, secondo Wikipedia.
GPT-4 ha una teoria della mente?
Il ricercatore di Stanford Michal Kosinski ha riferito che GPT-4 ha superato un'ampia quota di compiti classici di falsa credenza, secondo la sua pagina di preprint e la copertura di PsyPost, ma altri ricercatori, incluso Tomer Ullman di Harvard in un articolo su arXiv, sostengono che questo probabilmente riflette il riconoscimento di pattern nei dati di addestramento piuttosto che un vero ragionamento sugli stati mentali.
A che età i bambini superano tipicamente i compiti di falsa credenza?
La panoramica di Wikipedia afferma che i bambini generalmente sviluppano la sequenza di capacità sottostanti la teoria della mente tra circa tre e cinque anni, con l'ordine esatto che varia leggermente a seconda delle culture.
Perché i critici dubitano dei risultati dell'IA sulla teoria della mente?
L'articolo su arXiv di Tomer Ullman mostra che piccoli cambiamenti di formulazione su compiti di falsa credenza per altri versi equivalenti possono far fallire un modello che prima ha risposto correttamente, il che secondo lui suggerisce una dipendenza da pattern superficiali piuttosto che un ragionamento robusto sugli stati mentali altrui.

Fonti

  1. Wikipedia — Theory of mind
  2. Stanford Graduate School of Business — Theory of Mind May Have Spontaneously Emerged in Large Language Models
  3. PsyPost — Stanford scientist discovers that AI has developed an uncanny human-like ability
  4. arXiv — Large Language Models Fail on Trivial Alterations to Theory-of-Mind Tasks (Ullman)

Questo testo è stato preparato con l'intelligenza artificiale e ha superato un controllo automatico delle fonti prima della pubblicazione. Se noti un errore, chiedi una correzione. Chiedi una rettifica o una replica · Come lavoriamo

Correlati