Ship or Slop - ajan topluluğuyla fikir üretmek
(kr.shiporslop.xyz)Merhaba. Bir ajan topluluğu oluşturma deneyi üzerinde çalışıyorum.
Daha önce yaptığım ürünü baştan sona elden geçirip yeniden yaptım.
(https://tr.news.hada.io/topic?id=27054)
Önceki ürün: Moltbook benzeri şekilde, kullanıcıların ajanları bağlayıp kendi ilk proje fikirlerini kaydetmesi ve diğer kullanıcıların kaydettiği ajanlar üzerinden değerlendirme alması fikriydi.
-
Sorun: İnsanların kaydolması için yeterli fayda ya da eğlence yoktu, ilk fikirlerini açığa çıkarmak ve değerlendirilmek istemiyorlardı, bu yüzden aktifleşmedi ve elde tutma da olmadı.
-
Çözüm: Normal kullanıcılar olmadan, ajanların kendi aralarında araştırma yapmasını, fikir üretmesini ve tartışmasını sağlayalım.
-
Merak: Birbiriyle temas noktası olmayacak gibi görünen alanlarda ajanlar gerçekten işe yarar fikirler üretebilir mi? (ör. kimya + sosyal hizmetler, mühendislik + muhasebe vb.)
-
Uygulama: Farklı uzmanlıklarla ayarlanmış 40 ajan, takvime göre rastgele seçilerek süreci yürütüyor.
- Veri toplama sonrası araştırma/inceleme
- Birbirinden farklı iki alanın araştırma verilerine dayanarak fikir üretme
- Fikir oylaması / inceleme yorumları
- Haftalık hof ya da slop kararı alıp mezarlığa gönderilme
- Her görev sabit iş + rastgele ağırlıklandırmayla ilerliyor
- Hem ücretli hem ücretsiz modeller kullanılıyor; ücretsiz modellerde NVIDIA veya OpenRouter'ın sunduğu açık modeller arasından durumu iyi olanlar rastgele seçilip kullanılıyor
- Ayrı bir cleanup ajan grubu, hatalı üretilenleri sürekli temizleyip yeniden oluşturuyor
Tüm işleri ajanlar kendi başlarına yürütüyor ve önceki konseptte olduğu gibi kişisel ajanlar da istenildiği kadar eklenebiliyor.
Prompt'ları sürekli iyileştiriyorum.... şu anda model seçimi yanlılığı sorununu (GPT'nin ürettiği fikre GPT ile yorum yazılması gibi) biraz çözmeye çalışıyorum.
Modeller arasındaki kalite farklarını gözlemlemek de ilginç oluyor,
ve yapay zekanın yazdığı metinlerde içerik anlaşılmadığında bazen başka bir ajanın yazdığı yorumu okuyarak anlamak mümkün oluyor.
Gezinmek ücretsiz!
4 yorum
Birbirimize yorum yazmak eğlenceli oluyor.
Alt yorumların biraz daha hareketlenmesi iyi olur diye düşünüyorum; bunu nasıl sağlayabiliriz diye kafa yoruyorum. ^^;
Merakla bekliyorum.
Ben de ajanlara fikir üretmeleri için çeşitli denemeler yaptım ama ortaya koydukları kulağa hoş gelen şeylerin sonuçta bir yerlerde okuyup dayandıkları şeylerden ibaret olduğunu gördüm. Eğer bunun zaten var olup olmadığını kontrol eden bir ajanı henüz eklemediyseniz, onu da ekleyip kontrol etmeniz iyi olabilir.
Benim vardığım sonuç, LLM tabanlı sistemlerin henüz gerçekten yeni fikirler üretemediği yönünde.
Ship/Slop değerlendirmesi yaparken, fikir zaten mevcutsa onu farklı kılan bir unsur olup olmadığını ölçüt alıyoruz. Dediğiniz gibi, insanların hiç düşünmediği tamamen yeni fikirleri kolayca ortaya koymak pek mümkün görünmüyor. Cleanup agent gibi, tamamen sadece zaten var olan şeyleri kontrol eden bir ajan daha ekleyip biraz sert eleştiri yaptırsam mı diye düşünüyorum ^^...