1. Giriş

Bu inceleme makalesi, sağduyu akıl yürütmenin modern sohbet yapay zekası sistemlerine entegre edilmesi gibi kritik bir zorluğu ele almaktadır. Büyük önceden eğitilmiş dil modelleri (örn., BERT, GPT, T5) sözdizimi ve bağlamı anlamada kayda değer başarılar elde etmiş olsa da, temelde insanların kanıksadığı örtük, dünyevi bilgiden yoksundurlar. Makale, bu boşluğun yapay zekanın gerçekten doğal, tutarlı ve akıllı diyaloglara girmesini engelleyen birincil darboğaz olduğunu savunmaktadır. Georgia Tech'ten Christopher Richardson ve Larry Heck, çalışmalarını bu yeni ancak hayati alandaki gelecek araştırmalara rehberlik etmek için mevcut manzaranın—yöntemler, veri kümeleri ve değerlendirme—gerekli bir haritalaması olarak konumlandırmaktadır.

2. Sohbet Yapay Zekası Problemlerinde Sağduyu Akıl Yürütme

Makale, sağduyu eksikliğinin en belirgin olduğu belirli sohbet görevlerini tanımlamaktadır.

2.1 Diyalog Tutarlılığı ve Önemlilik

Birden fazla tur boyunca mantıksal olarak tutarlı ve konuyla ilgili bir sohbet sürdürmek. Sağduyu olmadan, modeller sözdizimsel olarak doğru ancak anlamsal olarak saçma veya ilgisiz yanıtlar üretir.

2.2 Soru Cevaplama ve Görev Tamamlama

Açıkça belirtilmemiş varsayımlar gerektiren soruları yanıtlamak veya talimatları tamamlamak. Örneğin, "kettle'ı kaynat" ifadesinin, açıkça belirtilmese bile, sonraki adımın "suyu dök" olduğunu ima ettiğini anlamak.

2.3 Gündelik Sohbet ve Sosyal Etkileşim

Mizahı, ironiyi, empatiyi ve sosyal normları anlamak. Bu, mevcut modellerin büyük ölçüde istatistiksel olarak çıkarsadığı, anlamadığı, insan psikolojisi ve sosyal kuralların derin bir modelini gerektirir.

3. Sağduyu Entegrasyonu Yöntemleri

İnceleme, literatürde araştırılan birincil teknik yaklaşımları kategorize etmektedir.

3.1 Model İnce Ayarı

Büyük dil modellerini (LLM) sağduyu bilgisi açısından zengin veri kümeleri (örn., ATOMIC, SocialIQA) üzerinde daha fazla eğitmek. Bu yaklaşım, sağduyuyu modelin parametrelerine örtük olarak yerleştirmeyi amaçlamaktadır.

3.2 Bilgi Grafiği Temellendirme

Modeli ConceptNet veya ATOMIC gibi yapılandırılmış bilgi tabanlarına açıkça bağlamak. Model, çıkarım sırasında bu grafikler üzerinden bilgi alır veya akıl yürütür. Önemli bir örnek, bu grafiklerden yeni bilgi demetleri üretmek için eğitilmiş bir dönüştürücü model olan COMET'tir (Bosselut ve diğerleri, 2019).

3.3 Doğal Dil Açıklamaları

Modelleri sadece bir cevap değil, aynı zamanda doğal dilde bir akıl yürütme izi veya açıklama üretecek şekilde eğitmek. Bu, modeli örtük adımları ifade etmeye zorlayarak potansiyel olarak sağlamlığı artırır.

4. Kıyaslamalar ve Değerlendirme Metrikleri

4.1 Yaygın Veri Kümeleri

  • CommonsenseQA: Sağduyu gerektiren çoktan seçmeli soru-cevap.
  • SocialIQA: Sosyal ve duygusal sağduyuya odaklanır.
  • PIQA: Talimat takibi için fiziksel sağduyu.
  • DialogRE: Diyaloglar içindeki ilişkiler hakkında akıl yürütme.

4.2 Değerlendirme Metrikleri

Standart doğruluk ötesinde, alan şu metrikleri kullanır:

  • İnsan Değerlendirmesi: Tutarlılık, ilginçlik ve makulluk için.
  • Bilgi-F1: Gerçek bilgi olgularıyla örtüşmeyi ölçme.
  • Akıl Yürütme Zinciri Doğruluğu: Üretilen açıklamaların mantıksal sağlamlığını değerlendirme.

5. Güncel Teknoloji Modelleri Üzerine Ön Gözlemler

Yazarlar, önde gelen açık diyalog modelleri BlenderBot 3 ve LaMDA üzerinde kritik, uygulamalı bir analiz sunmaktadır. Gözlemleri çarpıcıdır: bu modellerin ölçeğine ve karmaşıklığına rağmen, sıradan sağduyu görevlerinde sıklıkla başarısız olmaktadırlar. Örnekler arasında bir konuşma içinde çelişkili ifadeler üretmek veya temel fiziksel kısıtlamaları anlayamamak yer alır. Bu ampirik kanıt, makalenin temel tezini güçlü bir şekilde vurgulamaktadır: kıyaslama performansı, açık uçlu etkileşimde sağlam, kullanılabilir sağduyu ile eşdeğer değildir.

6. Temel İçgörü ve Analiz

Temel İçgörü: Sohbet yapay zekası alanı ciddi bir "sağduyu borcu" çekmektedir. Sallantılı, örtük temeller üzerine gökdelenler (devasa LLM'ler) inşa ettik. İnceleme, temel sorunun teknik eksikliği değil, modern NLP'nin istatistiksel, örüntü eşleştirme doğası ile insan sağduyusunun sembolik, nedensel ve analojik doğası arasındaki temel bir uyumsuzluk olduğunu doğru bir şekilde tespit etmektedir. Chollet'in (2019) "Zekanın Ölçüsü Üzerine" adlı temel çalışmasında belirtildiği gibi, gerçek zeka, yeni durumlarda beceri edinimi ve genelleme gerektirir—bu, zengin bir dünya modeli olmadan imkansız bir başarıdır.

Mantıksal Akış: Makalenin yapısı mantıklı ve ikna edicidir. Sorunu ve tezahürlerini tanımlamaktan (Bölüm 1-2), denenmiş mühendislik çözümlerini kataloglamaya (Bölüm 3), ilerlemeyi nasıl ölçtüğümüzü incelemeye (Bölüm 4) ve nihayetinde mevcut çözümlerin yetersiz olduğuna dair somut kanıtlar sunmaya (Bölüm 5) doğru ilerler. Bu akış bilimsel yöntemi yansıtır: hipotez (sağduyu eksik), deney (çeşitli entegrasyon yöntemleri), ölçüm (kıyaslamalar) ve sonuç (çözülmedi).

Güçlü ve Zayıf Yönler: Makalenin en büyük gücü, Güncel Teknoloji modellerinin somut, eleştirel değerlendirmesidir. Akademik soyutlamaların ötesine geçerek gerçek başarısızlık modlarını göstermektedir. İncelemelerde yaygın olan birincil zayıflığı, tanımlayıcı olması ve reçete edici olmamasıdır. Bölgeyi haritalandırır ancak hangi yolların en umut verici olduğu konusunda sınırlı rehberlik sunar. MIT CSAIL gibi kurumlardan nöro-sembolik entegrasyon araştırmalarında ağırlıkla vurgulanan bir nokta olan, saf dönüştürücü tabanlı modellerin nedensel akıl yürütme için mimari sınırlamalarını hafife almaktadır.

Uygulanabilir İçgörüler: Uygulayıcılar ve araştırmacılar için çıkarım açıktır: sağduyuyu sadece üzerinde ince ayar yapılacak başka bir veri kümesi olarak görmeyi bırakın. Alana bir paradigma değişikliği gerekmektedir. 1) Nöro-Sembolik Mimariye Yatırım Yapın: Sinir ağlarını açık, manipüle edilebilir bilgi temsilleriyle (Türevlenebilir Tümevarımsal Mantık Programlama üzerine yapılan çalışma gibi) birleştiren hibrit modeller gerekli bir yöndür. 2) Daha İyi Simüle Edilmiş Ortamlar Geliştirin: Takviyeli öğrenme için OpenAI'nin Gym'i gibi, ajanların sadece metinden değil, somutlaşmış deneyim ve sonuçlar yoluyla sağduyu öğrenebileceği zengin, etkileşimli simülatörlere (AllenAI'nin THOR gibi platformlarından ilham alarak) ihtiyacımız var. 3) Değerlendirmeyi Yeniden Düşünün: Statik soru-cevap kıyaslamalarından, modellerin zaman içinde tutarlı bir dünya anlayışı göstermesi gereken dinamik, etkileşimli değerlendirmeye geçin, ARC (Soyutlama ve Akıl Yürütme Derlemi) mücadelesinin arkasındaki ilkelere benzer şekilde.

7. Teknik Detaylar

Bilgi grafiği temellendirme yaklaşımı, genellikle bir alıcı-güçlendirilmiş üretim çerçevesi içerir. Biçimsel olarak, bir diyalog bağlamı $C$ verildiğinde, model, bir bilgi grafiği $\mathcal{G}$'den ilgili sağduyu bilgisi demetleri $K = \{(h_i, r_i, t_i)\}$ kümesini alır; burada $h$ bir baş varlık, $r$ bir ilişki ve $t$ bir kuyruk varlıktır. Son yanıt $R$, hem $C$ hem de $K$'ya koşullandırılarak üretilir:

$P(R | C) \approx \sum_{K} P_{\text{retrieve}}(K | C) \cdot P_{\text{generate}}(R | C, K)$

COMET gibi modeller bunu, $(h, r)$ verildiğinde kuyruk varlığı $t$'yi tahmin etmek için bir dönüştürücüyü (örn., GPT-2) ince ayarlayarak, grafiği gizli bir uzayda gezinmeyi etkin bir şekilde öğrenerek uygular: $t = \text{COMET}(h, r)$.

8. Deneysel Sonuçlar ve Grafik Açıklaması

PDF önizlemesi açık grafikler içermese de, tanımlanan ön gözlemler önemli bir performans boşluğunu ima etmektedir. Bir dizi sağduyu diyalog görevinde (örn., Tutarlılık, Fiziksel Akıl Yürütme, Sosyal Akıl Yürütme) insan performansı ile BlenderBot3 ve LaMDA'yı karşılaştıran varsayımsal bir çubuk grafik kavramsallaştırabiliriz. Y ekseni bir puanı (0-100) temsil eder. Grafik şunları gösterecektir:

  • İnsan Performansı: Tüm görev kategorilerinde tutarlı olarak yüksek bir çubuk (~90-95).
  • Güncel Teknoloji Modelleri (BlenderBot3/LaMDA): Yüksek varyans gösteren çubuklar—belki Tutarlılıkta ~80 (örüntüleri taklit edebildikleri yer), ancak daha derin anlama gerektiren Fiziksel ve Sosyal Akıl Yürütme görevlerinde keskin bir şekilde ~50-60'a düşen. Hata çubukları büyük olur, tutarsızlığı gösterir.
  • Temel Çıkarım: Görsel boşluk, özellikle fiziksel ve sosyal akıl yürütmede, makalenin temel sınırlama iddiasını, artımsal iyileştirme ihtiyacını değil, çarpıcı bir şekilde gösterecektir.

9. Analiz Çerçevesi Örneği

Senaryo: Bir sohbet asistanının basit bir anlatıyı anlayışını değerlendirme.

Diyalog Bağlamı: Kullanıcı: "Yeni bir köpek yavrusu aldım! Çok enerjik. Kapıyı açmaya giderken onu en sevdiğim ayakkabılarımla birlikte oturma odasında bıraktım."

Asistan Yanıtı A (Sağduyu Eksik): "Ne güzel. Ayakkabıların rengi ne?"

Asistan Yanıtı B (Sağduyu ile): "Ay, o ayakkabılara bir bakmak isteyebilirsin! Yavru köpekler çiğnemeyi sever."

Çerçeve Analizi:

  1. Bilgi Alımı: Model (yavru köpek, Yapabilir, çiğnemek), (ayakkabı, Yapılmıştır, deri/kumaş), (çiğnemek, Neden Olur, hasar) gibi demetlere erişiyor mu?
  2. Nedensel Akıl Yürütme: Bu olguları zincirleyebiliyor mu: yeni yavru + enerjik + gözetimsiz + çiğnenebilir nesne → hasar olasılığı yüksek.
  3. Sosyal/Pragmatik Akıl Yürütme: Kullanıcının belirtilmemiş endişesini (ayakkabılar için endişe) çıkarıyor ve ilgili, empatik bir uyarı üretiyor mu?
Yanıt A üçünü de başaramaz. Yanıt B bu örtük çerçevenin başarılı uygulamasını gösterir. Mevcut Güncel Teknoloji modelleri, önemsiz olmayan bir yüzdede Yanıt A'yı üretecektir.

10. Gelecekteki Uygulamalar ve Yönelimler

Sağduyu akıl yürütmeyi çözmek, dönüştürücü uygulamaların kilidini açacaktır:

  • Gerçek Kişisel Yapay Zeka Asistanları: Karmaşık görevleri proaktif olarak yönetebilen ajanlar ("Haftalık programımı, diyet hedeflerimi ve buzdolabında zaten ne olduğunu düşünerek haftalık market alışverişi sipariş et").
  • Gelişmiş Eğitim Öğreticileri: Öğrencinin zihinsel durumunu modelleyerek yanlış anlamasını teşhis eden ve Sokratik açıklamalar üreten sistemler.
  • Ruh Sağlığı Arkadaşları: Sosyal ve psikolojik normları anlayarak nüanslı duygusal destek ve kriz tespiti yapabilen sohbet robotları.
  • Sanal Dünyalarda Otonom Ajanlar: Oyunlarda veya metaverslerde inandırıcı motivasyonlar, uzun vadeli hedefler ve çevrelerini anlayışla davranan NPC'ler.
  • Araştırma Yönelimi: Gelecek, somutlaşmış, çok modlu öğrenme (videodan, ses ve fiziksel etkileşimden öğrenme), karşıt olgusal akıl yürütmeye izin veren nedensel dünya modelleri ve COMET gibi yapay zeka sistemleri tarafından dinamik olarak güncellenen geniş ölçekli, titizlikle hazırlanmış sağduyu bilgi grafikleri üzerindedir.

11. Kaynaklar

  1. Richardson, C., & Heck, L. (2023). Commonsense Reasoning for Conversational AI: A Survey of the State of the Art. Workshop on Knowledge Augmented Methods for NLP, AAAI 2023.
  2. Bosselut, A., Rashkin, H., Sap, M., Malaviya, C., Celikyilmaz, A., & Choi, Y. (2019). COMET: Commonsense Transformers for Automatic Knowledge Graph Construction. Proceedings of the 57th Annual Meeting of the Association for Computational Linguistics.
  3. Speer, R., Chin, J., & Havasi, C. (2017). ConceptNet 5.5: An Open Multilingual Graph of General Knowledge. Proceedings of the AAAI Conference on Artificial Intelligence.
  4. Sap, M., Le Bras, R., Allaway, E., Bhagavatula, C., Lourie, N., Rashkin, H., ... & Choi, Y. (2019). ATOMIC: An Atlas of Machine Commonsense for If-Then Reasoning. Proceedings of the AAAI Conference on Artificial Intelligence.
  5. Chollet, F. (2019). On the Measure of Intelligence. arXiv preprint arXiv:1911.01547.
  6. Storks, S., Gao, Q., & Chai, J. Y. (2019). Recent Advances in Natural Language Inference: A Survey of Benchmarks, Resources, and Approaches. arXiv preprint arXiv:1904.01172.
  7. Vaswani, A., Shazeer, N., Parmar, N., Uszkoreit, J., Jones, L., Gomez, A. N., ... & Polosukhin, I. (2017). Attention is All You Need. Advances in Neural Information Processing Systems.