Bilim · Makale

Zihin Kuramı: Psikolojide Ne Anlama Gelir ve Yapay Zeka Araştırmacıları Bunu Neden Tartışıyor?

Yayın:

Kısaca

Zihin kuramı, kişinin kendisine ve başka insanlara inançlar, istekler ve niyetler atfetme becerisidir ve başkasının gerçeklik görüşü kendisininkinden farklı olsa bile davranış hakkında tahminler yapmasını sağlar. Çocuk gelişimi testleriyle, örneğin Sally-Anne görevi gibi, uzun süredir incelenen bu kavram, Stanford'lu bir araştırmacının GPT-4 gibi büyük dil modellerinin bu testlerin çoğunu geçtiğini bildirmesinin ardından kamuoyu tartışmasına yeniden girdi; bu iddiaya başka bilim insanları itiraz ediyor.

Bu sürüm, özgün metnin (English) makine çevirisidir. Özgün metni oku

Psikolojide zihin kuramı ne anlama gelir

Zihin kuramı (ToM), Wikipedia'nın kavrama ilişkin genel bakışına göre, başka bireyleri onlara zihinsel durumlar atfederek anlama kapasitesi olarak tanımlanır. Bu yetenek, bir kişinin başka birinin kendisininkinden farklı inançlar, istekler veya niyetler taşıyabileceğini fark etmesine ve bu farkındalığı davranışı tahmin etmek veya açıklamak için kullanmasına imkân verir.

Terim, modern araştırma literatürüne David Premack ve Guy Woodruff'ın 1978 tarihli 'Does the chimpanzee have a theory of mind?' (Şempanzenin bir zihin kuramı var mı?) başlıklı makalesiyle girdi; Wikipedia'ya göre bu makale, psikologları bu yeteneği türler arasında ve çocukluk gelişimi boyunca incelemeye yöneltti. Daha sonra ToM'un nasıl işlediğine dair iki rakip açıklama ortaya çıktı: insanların başkalarının durumlarını çıkarmak için halk-psikolojisi kurallarını uyguladığını öne süren 'kuram-kuramı' ve insanların kendilerini başkalarının yerine koyarak başkalarını zihinsel olarak modellediğini öne süren simülasyon kuramı.

Sally-Anne testi

Çocuklarda ToM'u test etmek için standart araç, en sık Sally-Anne öyküsü olarak sunulan yanlış inanç görevidir: Sally bir misketi sepetine koyar ve odadan çıkar; Anne daha sonra misketi bir kutuya taşır. Wikipedia'nın açıkladığına göre, çocuk, Sally'nin misketi gerçekte bulunduğu yerde değil, kendi özgün -şimdi yanlış olan- inancı doğrultusunda sepette arayacağını tahmin ederse testi geçer. İlgili bir versiyon olan beklenmedik içerik görevi, çocuklara yanıltıcı şekilde etiketlenmiş bir kutunun içinde başka birinin ne olduğunu düşüneceğini sorar.

Çocuklar bu yetenekleri tipik olarak yaklaşık üç ile beş yaş arasında belirli bir sırayla geliştirir; önce insanların farklı şeyler isteyebileceğini kavramaktan, sonra insanların farklı inançlar taşıyabileceğini kavramaya ve nihayetinde tam yanlış inanç testlerini geçmeye doğru ilerlerler. Wikipedia, tam sıranın kültüre göre değiştiğini belirtiyor: örneğin İran ve Çin'deki çocuklar 'bilgiye erişim'i daha erken kavrıyor ama 'farklı inançlar'ı kavramaları daha uzun sürüyor; araştırmacılar bunu kolektivist kültürel değerlerle ilişkilendiriyor.

Yapay zeka tartışmaya neden girdi

Makine zihin kuramına ilgi, Stanford'lu hesaplamalı psikolog Michal Kosinski'nin çocuklarda kullanılan aynı yanlış inanç görevlerini bir dizi dil modeline uygulamasının ardından arttı. Stanford Graduate School of Business'ın kendi sitesindeki çalışma raporu (working-paper) sayfasına göre Kosinski, 40 yanlış inanç senaryosu ile bunlara karşılık gelen doğru inanç kontrol versiyonları oluşturdu ve bunları 2010'ların sonu ile 2023 arasında piyasaya sürülen dil modellerinde test etti.

GPT modellerinin yanlış inanç görevlerindeki performansı, Stanford GSB'nin çalışma raporu sayfasında bildirildiği şekliyle
ModelÇıkış dönemiBaşarı oranı (Stanford GSB)En yakın çocuk yaşı ölçütü
2020 öncesi modeller2020'den önceyaklaşık %0tipik test yaşının altında
GPT-3Mayıs 2020yaklaşık %40~3,5 yaşındaki çocuklar
GPT-3, güncellenmiş sürümOcak 2022yaklaşık %70~6 yaşındaki çocuklar
GPT-3.5Kasım 2022yaklaşık %90~7 yaşındaki çocuklar
GPT-4Mart 2023yaklaşık %95yetişkin seviyesine yaklaşan

PsyPost'ta araştırmaya dair ayrı bir yazı, 11 modeli kapsadığı belirtilen daha sonraki bir test turu için farklı rakamlar veriyor: GPT-3 varyantlarının görevlerin yalnızca yaklaşık %20'sini çözdüğünü, 'ChatGPT-4'ün ise toplamda %75'ini çözdüğünü bildiriyor; bu da beklenmedik içerik görevlerinde %90, daha zor olan beklenmedik transfer versiyonunda ise sadece %60 şeklinde ayrışıyor. İki kaynak farklı test gruplarını ve model sürümlerini tanımlıyor; yüzdelerin uyuşmamasının olası nedenlerinden biri bu. Ancak her ikisi de daha yeni modellerde daha eski modellere kıyasla açık bir iyileşmeye işaret ediyor.

BDM'ler (büyük dil modelleri) sadece dil modelleri değildir — bunlar, esasında, insan zihninin modelleridir.

— Michal Kosinski, Stanford Graduate School of Business, PsyPost'un aktardığı şekliyle

Karşı görüş: örüntü eşleştirme mi, gerçek anlayış mı?

Kosinski'nin sonucu itirazsız kalmadı. Harvard'lı psikolog Tomer Ullman, arXiv'de 'Large Language Models Fail on Trivial Alterations to Theory-of-Mind Tasks' (Büyük Dil Modelleri Zihin Kuramı Görevlerindeki Önemsiz Değişikliklerde Başarısız Oluyor) başlıklı bir makale yayımladı ve aynı temel psikolojik mantığı koruyan küçük yeniden ifade değişikliklerinin bir modelin cevabını doğrudan yanlışa çevirebildiğini öne sürdü. Makalenin kendi çerçevelemesinde özetlenen Ullman'ın görüşü, araştırmacıların makine psikolojisini değerlendirirken şüpheci bir başlangıç noktasından hareket etmesi gerektiği ve neredeyse aynı görevlerdeki dağınık başarısızlıkların ortalama bir başarı oranından daha önemli olduğudur.

PsyPost'un Stanford araştırmasına ilişkin haberi de bu kısıtlamaya doğrudan işaret ediyor: GPT modelleri, benzer yanlış inanç öykülerini de içerebilecek devasa miktarda metin üzerinde eğitildiğinden, bir modelin görünmeyen bir karakterin zihinsel durumu hakkında akıl yürütmek yerine aşina olduğu bir örüntüyü tanıyor olma ihtimalini dışlamak zor. Araştırmacılar bu riski azaltmak için yeni senaryolar tasarlamaya çalıştı, ancak makale bunun tam olarak garanti edilemeyeceğini belirtiyor.

Bu sorunun laboratuvarın ötesinde neden önemli olduğu

Çocuklarda ve şempanzelerde kullanılan aynı test bataryası artık yazılımlara uygulanıyor; çünkü Stanford GSB sayfasının belirttiği gibi, zihin kuramı insan sosyal etkileşiminin, iletişimin, empatinin, öz farkındalığın ve ahlakın merkezinde yer alıyor. Ancak Stanford'un materyali de Ullman'ın makalesi de, sabit bir test sorusu kümesini geçmenin, bilişsel bilimcilerin bu terimi insanlar için kullandığı biçimde bir sistemin zihin kuramına sahip olduğunu kanıtlamakla aynı şey olmadığı konusunda hemfikir.

Sorular

Basit bir dille zihin kuramı nedir?
Wikipedia'nın zihin kuramına ilişkin genel bakışında tanımlandığı üzere, başka insanların kendi inançları, istekleri ve niyetleri olduğunu, bunların kendisininkinden farklı olabileceğini fark etme ve bunu onların davranışını tahmin etmek için kullanma becerisidir.
Sally-Anne testi nedir?
Wikipedia'ya göre, bir çocuğun, Sally adlı bir karakterin bir nesneyi en son bıraktığı yerde arayacağını tahmin etmesi gereken bir yanlış inanç görevidir; oysa nesne, Sally orada değilken diğer karakter Anne tarafından gizlice taşınmıştır. Bu, inançların yanlış olabileceğini anlamanın bir testidir.
GPT-4'ün zihin kuramı var mı?
Stanford araştırmacısı Michal Kosinski, çalışma raporu sayfasına ve PsyPost'un buna ilişkin haberine göre GPT-4'ün klasik yanlış inanç görevlerinin büyük bir kısmını çözdüğünü bildirdi. Ancak Harvard'lı Tomer Ullman gibi başka araştırmacılar bir arXiv makalesinde, bunun gerçek zihinsel durum akıl yürütmesini değil, muhtemelen eğitim verisi üzerindeki örüntü eşleştirmeyi yansıttığını öne sürüyor.
Çocuklar genellikle hangi yaşta yanlış inanç görevlerini geçer?
Wikipedia'nın genel bakışı, çocukların zihin kuramının temelini oluşturan yetenekler dizisini genellikle yaklaşık üç ile beş yaş arasında geliştirdiğini, tam sıralamanın ise kültürler arasında biraz farklılık gösterdiğini belirtiyor.
Eleştirmenler yapay zekanın zihin kuramı sonuçlarından neden şüphe duyuyor?
Tomer Ullman'ın arXiv makalesi, aksi takdirde eşdeğer olan yanlış inanç görevlerindeki küçük ifade değişikliklerinin, daha önce doğru cevap vermiş bir modelin başarısız olmasına yol açabildiğini gösteriyor; Ullman bunun, başkalarının zihinsel durumları hakkında sağlam bir akıl yürütmeden ziyade yüzeysel örüntülere bağlılığa işaret ettiğini öne sürüyor.

Kaynaklar

  1. Wikipedia — Theory of mind
  2. Stanford Graduate School of Business — Theory of Mind May Have Spontaneously Emerged in Large Language Models
  3. PsyPost — Stanford scientist discovers that AI has developed an uncanny human-like ability
  4. arXiv — Large Language Models Fail on Trivial Alterations to Theory-of-Mind Tasks (Ullman)

Bu yazı yapay zekâ ile hazırlandı ve yayından önce otomatik kaynak denetiminden geçti. Bir hata görürseniz düzeltme isteyin. Düzeltme ya da cevap iste · Nasıl hazırlıyoruz

İlgili yazılar