Araştırma: Yapay zeka asistanları haber içeriklerini yanlış aktarıyor

Yapay Zeka Asistanlarının Haber Sorularına Verdiği Yanıtların İncelenmesi

Yapılan bir araştırma, ChatGPT, Microsoft Copilot, Google Gemini ve Perplexity gibi yapay zeka asistanlarının 3 bin farklı haber sorusuna verdiği yanıtları detaylı bir şekilde ele aldı. Araştırma, bu asistanların doğruluk, kaynak gösterme ve görüş-gerçek ayrımı gibi önemli kriterler açısından incelendi.

Yapılan inceleme sonucunda, asistanların verdiği yanıtların yüzde 45’inde en az bir ciddi hata tespit edildi. Ayrıca, yanıtların yüzde 81’inde herhangi bir türde sorunun olduğu belirlendi. Özellikle, asistanların haber kaynaklarını doğru bir şekilde atfetmede zorlandığı ortaya çıktı. Yanıtların üçte birinde “eksik, yanıltıcı veya hatalı kaynak gösterimi” saptandı.

Google’ın Gemini asistanında bu oran yüzde 72’ye kadar çıkarken, diğer platformlarda bu oran genellikle yüzde 25’in altında kaldı. Ayrıca, incelenen yanıtların yaklaşık yüzde 20’sinde güncel olmayan veya yanlış bilgi içeriği tespit edildi.

Google, Gemini’nin kullanıcı geri bildirimleriyle sürekli olarak geliştirildiğini belirtirken; OpenAI ve Microsoft, yapay zekanın yanlış veya uydurma bilgi üretme sorununu çözmek için çalışmalar yaptıklarını açıklamıştı. Perplexity ise “Derin Araştırma” modunun yüzde 93,9 doğruluk oranına sahip olduğunu iddia ediyor.

Araştırmada dikkat çeken hatalı örnekler arasında, Gemini’nin tek kullanımlık elektronik sigaralarla ilgili bir yasayı yanlış aktardığı ve ChatGPT’nin Papa Francis’in ölümünden aylar sonra hâlâ görevde olduğunu bildirdiği örnekler yer alıyor.

Çalışmaya Kanada’dan CBC/Radio-Canada ve Fransa, Almanya, İspanya, Ukrayna, İngiltere ve ABD’den 18 ülkedeki 22 kamu yayın kuruluşu da katıldı.

Son olarak, EBU Medya Direktörü Jean Philip De Tender, araştırmanın sonuçlarına dair yaptığı açıklamada; “Güven erozyonu demokrasiyi zayıflatabilir. İnsanlar neye güveneceklerini bilmediklerinde hiçbir şeye güvenmemeye başlıyorlar. Bu da demokratik katılımı caydırabilir.” şeklinde ifadeler kullandı. EBU, yapay zeka şirketlerini haberlerle ilgili yanıtlarında daha şeffaf ve hesap verebilir olmaya çağırarak; “Haber kuruluşlarının hataları tespit edip düzelten sağlam süreçleri varsa, aynı sorumluluk yapay zekâ asistanları için de geçerli olmalıdır.” açıklamasını yaptı.