Yeni bir araştırmaya gore ChatGPT, programlama ile ilgili sorulara sık sık yanlış cevaplar veriyor ve geliştiriciler de hatalı detayları yok sayıyor.
OpenAI’ın ChatGPT söyleşi botu şeklinde araçların çalışanların işlerini aşırı kolaylaştıracak devrimsel teknolojiler oldukları, hatta gelecekte insanların işlerini ellerinden alabilecekleri konuşulan teknolojiler olarak öne çıkıyor. Pek oldukça çalışan da işlerini kolaylaştırmak için yapay zekâya güveniyor. Öte taraftan yeni bir araştırmaya gore ChatGPT, programlama ile ilgili sorulara %52 oranında yanlış yanıt veriyor.
Purdue Üniversitesi’nden araştırmacıların gerçekleştirdiği çalışmada, Stack Overflow’dan alınan 517 programlama sorusu ChatGPT’ye soruldu. Sonrasında ise yapay zekâ söyleşi botunun bu sorulara doğru yanıt verme yüzdesi ölçüldü. Araştırmacılar makalelerinde, “Analizimiz bizlere ChatGPT yanıtlarının %52’sinin yanlış data içerdiğini ve %77’sinin detaylı bulunduğunu gösterdi. Gene de emek harcama katılımcılarımız, ChatGPT’nin yanıtlarının kapsamlılığı ve akıcı dil seçimi sebebiyle %35 oranında ChatGPT’nin yanıtlarını kullanmayı tercih etti.” ifadelerini kullandı.
Geliştiriciler hatalı cevapları yakalayamadı
Daha rahatsız edici olan kısım ise geliştiricilerin hatalı cevapları daima yakalayamaması oldu. Araştırmaya gore katılımcılar, ChatGPT cevaplarındaki hatalı detayları %39 oranında görmezden geldi. Araştırmacılar bu durumun, ChatGPT’nin yanlış cevaplarına karşı tedbir alınması gerektiği anlamına geldiğini ve görünüşte doğru olan cevapların riskini ortaya koyduğunu belirtti.
Elbet ki bu .emek harcama yalnızca tek bir senaryo ve söyleşi botları da çeşitli amaçlara gore özelleştirilebiliyor. Yapay zekâ araçları üreten firmalar da botların daha doğru cevaplar verebilmesi için çalışmalarına devam ediyor.
