Yapay Zekaya Asla Söylememeniz Gereken Bir Cümle Keşfedildi: Performansını Düşürüyor!

Yapay zekâ ile çalışanlar epey kişi, işe başlarken modele “sen bilirkişi tek yazılımcısın” gibi talimatlar veriyor bununla birlikte yepyeni tek inceleme, bu metotin sanıldığı kadar yararlı olmadığını, bile çok durumlarda performansı düşürdüğünü ortaya koymuş durumda. Uzman rolü her arasında biri zamanlar işe yaramıyor University of Southern California bünyesinde yapılan tek çalışmaya göre “persona tabanlı yönlendirme” (yani modele tek görev atama) vazife çeşitüne bağlı olarak değişik neticelar veriyor. Yazı yazma, görev yapma ya da asayiş gibi alanlarda icra artışı görülüyor. Ancak matematik ve kodlama gibi doğruluk lüzumtiren alanlarda muvaffakiyet düşüyor. Araştırmacılar, bunun nedenini uç basit tek biçimde açıkladı. Bir modele “uzmansın” demek, ona yepyeni malumat kazandırmıyor. Hatta bu çeşit ifadeler, modelin şimdiki malumatleri doğrusu biçimde kullanmasını bile güçlaştırabiliyor. Yani tek süredir tesirli olduğu sanılan metot gerçekten çeşitlilik daha kötü neticelara gebe oluyor. Performans düşüşü ilgi çekici Araştırmada kullanılan MMLU benchmark testinde alınan neticelar kaydadeğer durumda. Normal modeller doğruluk oranı: %71.6 “Uzman” rolü verilen model: %68.0 Araştırmacılar bunun sebebinin modelin “talimatlara uyma moduna” geçmesi ve malumat hatırlama kapasitesinin geri planda kalması olduğunu düşünüyor. Doğru sualyu istifsar etmek her arasında biri şeyden ehemmiyetli "E peki yapay zekâdan tesirli yanıt eldeetti için ne şekilde kullanacağız?" diye düşünüyorsanız inceleme bu sualya da yanıt veriyor. Araştırmanın yapmış olduğu en netler çıkarım ise şu: Eğer doğruluk ve malumat ehemmiyetliyse → ilave görev tanımlamaya lüzum yok Eğer stil, yapıları ve kaidelara uyum ehemmiyetliyse → detaylı kılavuz yararlı Kısacası yapay zekâya “uzman” demek onu gerçekten mi bilirkişi yapmıyor. Asıl farkı yaratan şey, ne şekilde sual sorduğunuz. Yani bu noktada da doğrusu teşvik eden yazabilmenin her arasında biri şeyden ehemmiyetli olduğu gerçeği yeniden karşımıza çıkıyor.