ChatGPT programlama sorularında sınıfta kaldı

OpenAI şirketinin ChatGPT isimli yapay zeka sohbet botu yavaş yavaş kullanıcıların vazgeçilmezi haline gelmeye başladı. Bilhassa öğrenciler ve çalışanlar işlerinde ya da ödevlerinde daha süratli olabilmek ismine birçok bahiste ChatGPT gibi birçok farklı bottan destek alıyor. Lakin yeni bir araştırma, ChatGPT’ye bilgisayar programlama sorularını cevaplama konusunda fazla güvenmememiz gerektiğini ortaya koydu.

ChatGPT programlama sorularının yarısından fazlasını yapamıyor

Purdue Üniversitesi’nde yapılan araştırma, bu ayın başlarında Hawaii’deki Bilgisayar-İnsan Etkileşimi Konferansı’nda sunuldu. Yazılım geliştiricileri ve programcılar için oluşturulmuş bir soru-cevap platformu olan Stack Overflow’dan alınan 517 programlama sorusuna ChatGPT’nin verdiği karşılıklar incelendi.

Yapılan araştırmaya göre ChatGPT, programlama ile ilgili soruların %52’sine yanlış bilgiler içeren karşılıklar verdi. Ayrıyeten verdiği karşılıkların %77’sinin gereksiz yere uzun olduğu ortaya çıktı. katılımcılar, iyi ifade edilmiş lisan üslubu ve kapsamlılığı nedeniyle %35 oranında ChatGPT cevaplarını tercih etti.

ChatGPT’nin birtakım yanlışlarını programcılar da fark edemedi

Araştırmaya katılan programcılar, ChatGPT karşılıklarındaki yanlış bilgileri %39 oranında gözden kaçırdılar. Bu durum ChatGPT’nin, doğru görünen cevaplarının beraberinde getirebileceği riskleri de ortaya çıkarmış oldu. Araştırma, ChatGPT gibi araçları kullanan herkesin aslında aşina olduğu meselelerin sayılara dökülmesine yardımcı oldu.

Büyük teknoloji şirketleri, en emniyetli sohbet botlarını kullanıcılara sunmak için milyarlarca dolarlık yatırımlar yapmaya devam ediyor. Meta, Microsoft ve Google, aslında internetle olan bağlantımızı diğer bir boyuta taşıma potansiyeline sahip yeni bir alanı ele geçirme yarışında. Fakat, önlerinde aşmaları gereken birçok sorun yer alıyor.

Bu problemlerin başında ise ChatGPT aynıi botların yalnızca programlama alanında değil birçok soruyu yanıtlarken çuvallaması geliyor. Google’un yeni yapay zeka dayanaklı arama motorunun da ekseriyetle güvenilmez ya da mizah içerikli kaynaklardan aldığı yazıları doğru bilgi olarak sunduğu görüldü.

Peki kullanıcılar bu tip sohbet botlarına en sıradan soruları mı sormalı? Yoksa gelişmeleri için önümüzde daha zaman var mı?