Yapay zeka araçları hakkında son dönemde yapılan bir çalışma, popüler yapay zeka sohbet botlarının bilişsel sağlık açısından nasıl performans gösterdiğini ortaya koydu. The BMJ‘de yayınlanan bu araştırma, yapay zeka modellerini insanlardaki bunama belirtilerini tespit etmek için kullanılan testlere tabi tuttu. Bulgular, özellikle eski modellerde, bilişsel bozukluklara dair işaretlerin belirgin olduğunu gösterdi.
Araştırmanın Amacı ve Metodolojisi
Çalışmanın temel amacı, yapay zekanın tıbbi alanda, özellikle de bunama teşhisinde güvenilir bir araç olup olamayacağını değerlendirmekti. Bunun için Montreal Bilişsel Değerlendirmesi (MoCA) kullanıldı. Bu test, hafıza, dikkat, dil ve görsel-uzamsal yetenekler gibi çeşitli bilişsel becerileri ölçmek için tasarlanmıştır.
Bulgular: Performans Farklılıkları
Test edilen yapay zeka araçları arasında ciddi performans farklılıkları gözlemlendi:
- OpenAI GPT-4o: 30 üzerinden 26 puanla en yüksek skoru aldı ve genel olarak başarılı bulundu.
- Google Gemini Modelleri: Sadece 16 puan alabildi ve özellikle basit gecikmeli hatırlama görevlerinde başarısız oldu. Bu, beş kelimelik bir diziyi hatırlamak gibi temel bir bilişsel görevi yerine getirememesiyle dikkat çekti.
Araştırmacılar, eski büyük dil modellerinin zamanla daha kötü performans sergilediğini, yani “bilişsel gerileme” belirtilerini daha net ortaya koyduğunu belirtti.
Kritik Eksiklikler
Sohbet botlarının genel başarılarına rağmen, bazı alanlarda ciddi eksiklikler tespit edildi:
- Empati Eksikliği: Tüm sohbet botlarının empati yoksunluğu gösterdiği ve bunun frontotemporal bunama belirtisi olabileceği belirtildi.
- Görsel-Uzamsal Görevlerde Zorluk:
- Daire içine alınmış sayılar arasında çizgi çizme gibi görevlerde düşük performans sergilendi.
- Belirli bir saati temsil eden bir saat çizme görevi neredeyse tüm modeller için başarısızlıkla sonuçlandı.
İnsan ve Yapay Zeka Kıyaslaması
Araştırma, yapay zekanın kısa vadede insan doktorların yerini almasının olası olmadığını vurguluyor. Makalede, “Yakında bilişsel bozukluk gösteren yapay zeka modellerini tedavi etme gerekliliği doğabilir,” ifadesi dikkat çekti.
Gelecekteki İyileştirme Alanları
Yapay zekanın tıbbi teşhislerde etkinliğini artırmak için şunlara odaklanılabilir:
- Empati geliştirme algoritmaları
- Görsel-uzamsal yeteneklerin iyileştirilmesi
- Daha kapsamlı ve insana benzer hafıza sistemleri
Bu bulgular, yapay zeka araçlarının potansiyelini ortaya koyarken aynı zamanda mevcut sınırlamalarını da gözler önüne seriyor. Geliştiriciler için, yapay zekanın güvenilir bir sağlık aracı olabilmesi adına, empati ve görsel beceriler gibi insan benzeri özellikleri geliştirmek kritik bir hedef olacaktır.
