ChatGPT'nin geleceği anlatma yeteneği: geliştirilmiş tahminler için anlatısal promptların incelenmesi
(arxiv.org)• Bu çalışma, OpenAI'nin ChatGPT-3.5 ve ChatGPT-4 modellerinin tahmin yeteneklerini iki farklı prompt stratejisi kullanarak inceliyor: doğrudan tahmin ve gelecek anlatıları.
• Analiz, modellerin eğitim verisi kesim tarihi olan Eylül 2021'in ardından 2022'de gerçekleşen olaylara odaklanarak gelecekteki olayları tahmin etme becerisini değerlendiriyor.
• Araştırma bulguları, ileriye dönük anlatı promptlarının özellikle büyük Akademi Ödülü kazananlarını ve ekonomik eğilimleri tahmin etmede ChatGPT-4'ün tahmin doğruluğunu önemli ölçüde artırdığını gösteriyor.
• ChatGPT'nin anlatısal promptları, halüsinatif anlatı kurma yeteneğinden yararlanarak doğrudan tahmine kıyasla daha etkili veri sentezi ve ekstrapolasyon sağlıyor.
• Bu çalışma, büyük dil modellerinin (LLM) tahmin yeteneklerinin yeni bir yönünü vurguluyor ve analitik bağlamlarda potansiyel uygulamalar öneriyor.
• Araştırma ekibi, prompt başına 50 kez ChatGPT'ye sorgu göndererek yanıt dağılımı oluşturmak üzere iki araştırma asistanı görevlendirdi; böylece prompt başına toplam 100 deneme yapıldı.
• Sonuçlar, her bir prompt için yanıtların tam dağılımını açıklayan kutu grafikleriyle sunuluyor ve modelin performansı ile sınırlamalarına dair içgörüler sağlıyor.
Henüz yorum yok.