LLM tarafından üretilen gönderiler yasaklanmalı
(lobste.rs)- Sitede LLM tarafından üretilmiş yazılar paylaşıldığında nasıl işlem yapılacağına dair çok tartışma var, ancak bunlara izin verilip verilmeyeceğini belirleyen net bir politika olmadığı düşünülüyor
- Düzenli olarak LLM tarafından üretilmiş yazılar paylaşan kullanıcıların siteden engellenmesi gerektiği savunuluyor
- Gönderi sayfasında “LLM tarafından üretilen yazılara burada izin verilmez” uyarısının gösterilmesi öneriliyor
- Net bir politika ve uyarı, LLM üretimi yazıların işaretlenip işaretlenmemesi ya da yorumla mı karşılık verilmesi gerektiği etrafındaki tartışmaları azaltabilir
- Asıl amaç, LLM tarafından üretilen gönderilere izin verilmeyeceğine dair açık bir standart belirleyerek topluluğun vereceği tepkiyi sadeleştirmek
1 yorum
Lobste.rs görüşleri
Ara sıra düşük kaliteli yazılar sızsa da sorun değil gibi görünüyor. LLM tarafından üretilmiş içerik yasağı açıkça belirtilirse, ideal olarak yorumlarda kavga çıkaran istisna maddelerine gerek kalmadan, ana sayfadaki çöp yazıları azaltmak ve tekrar tekrar ihlal edenleri yasaklamak için net bir dayanak oluşur
Genel olarak katılıyorum. Bizzat yazma zahmetine bile girmedikleri bir şeyi okumak istemem
Yine de LLM üretimi cümleleri kusursuz biçimde tespit etmenin bir yolunu bilmiyorum ve bir yazının üretilmiş olabileceği gerekçesiyle insan ya da kaynak yasaklanması da hoşuma gitmiyor. Bazen sadece em dash kullandığım için LLM kullanmakla suçlandığım oldu ama bunu zaten 25 yıldan uzun süredir kullanıyorum
Düşük kaliteli içerik tespiti kusursuz değil diye politikanın kendisini hiç oluşturamamak doğru olmaz. Hatalar ara sıra olacaktır ama web’i kaplayıp insanların yazdıklarını geri plana iten LLM üretimi çöplüğe mutlaka karşı baskı uygulanmalı
Katılıyorum
Çoğu zaman bunun LLM üretimi bir yazı olduğu epey açık oluyor ve yazının kendisinde belirtilmemiş olsa bile, yazarın kendi sitesinin başka bir yerinde LLM kullandığını yazdığı durumlar da gördüm. Bu da karar vermeyi kolaylaştırıyor
Topluluğun düşük kaliteyi sezme becerisi de epey isabetli görünüyor. Aslında öyle değilken, yazarın LLM kullandığı iddiasıyla büyük bir yorum zincirinde üstüne gidilen bir durum hatırlamıyorum. Kimse ayırt edemiyorsa zaten ayırt edemiyordur
Gerçekten belirsiz durumlarda iyi niyet varsaymakta sorun yok. Sorun çıkaranlar genelde fazlasıyla bariz yazılar ve mesele, kimsenin fark etmeyeceği şekilde olabildiğince çok LLM yazısını lobsters’a sokuşturmaya çalışan birilerini engellemek değil
LLM üretimi makalelerden gerçekten nefret ediyorum ve ortadan kaybolmalarını istiyorum. Böyle uç örnekler nettir ve tespiti de muhtemelen kolaydır; kaldırılmalarına karşı çıkacak insan da çok az olur
Ama birinin, kısmen LLM üretimi commit’leri kabul etmiş bir yazılımı göndermesi durumunda ne olacak? Ya da tamamen LLM ile bir şey üretip bunu bir analiz yazısıyla belgelediyse? Bunlar biraz şeytanın avukatlığını yapmak için söylenen itirazlar ama lobsters içinde de neyin kabul edilebilir olduğuna dair bir yelpaze bulunduğu açık
LLM’nin az da olsa dokunduğu her şeyi tamamen yasaklamak kabul görmez diye düşünüyorum. En geniş kabul görecek cevap muhtemelen karma cezası olmayan bir bayrak olur. Yani “bana göre bu üretilmiş, dikkat et” sinyalini sonradan görecek kişilere bırakmak. Şu an büyük yorum zincirleri fiilen bu görevi görüyor; yorum kavgalarını azaltırken içeriğin görünürlüğü hakkında da sinyal verebilir
Mantıklı görünüyor. Düşüncelerini toparlamak için zaman harcamayan biri varsa, ben neden okumak için zaman harcayayım ki diye düşünüyorum
Bir iddiayı cilalamak ya da dilbilgisini kontrol etmek için chatbot’u rubber duck gibi kullanmak sorun değil. Bunun için özel bir tespitin bile gerektiğini sanmıyorum; topluluk üyelerinin beklentileri ve bariz durumlarda silinmesi yeterli
Hoşunuza gitmeyen bir yazıya hemen “LLM düşük kaliteli yazı!” diye bağırmak çok kolay. Peki sonra ne olacak? Konuya uygun olup benim katıldığım yazıları da, katılmadığım yazıları da görmek isterim; sağlıklı olan da bu
Bir yazının nasıl “düşük kaliteli” sayılacağı konusunda emin değilim. Bariz örnekler var ama gri alanlar da var. Yazar sadece tesadüfen LLM’lerin sıkça taklit ettiği belirli bir üslubu kullandığı için meşru bir yazı zayıf görünebilir
“authored by” gönderilerinde göndericinin genel özensizliğine bakmak adil olabilir. Sürekli bariz düşük kaliteli yazılar paylaşıyorsa yazarı özensiz olarak işaretlersiniz, moderasyon ekibi de “artık yapma” diye ulaşıp durmazsa yasaklar
Bir başkası aracılığıyla gönderilen “özensiz yazıların” da aynı şekilde sayılması gerekip gerekmediğinden emin değilim. Yazılım, sürekli düşük kaliteli görünen yazılar paylaşan birinin gönderi atma yetkisini kalıcı yasaklamak yerine geçici olarak soğutabilir gibi görünüyor. Ama her göndericinin bir yazının kaynağını savunamadığı takdirde yasaklandığı bir yapı keyifli olmaz
LLM kaynaklı düşük kaliteli yazı üretmenin ne kadar antisosyal olduğunu küçümsüyor gibisiniz. Şu anda bile böyle bariz örnekler, AI modasına kapılan insanlar tarafından gönderildiği için günlerce ana sayfada kalıyor
İlgili yazı: https://lobste.rs/s/wee21u/this_is_written_by_llm_comments_should_be
Örnekler:
https://lobste.rs/s/ojvhq9/coding_is_thinking_why_i_still_write_code
https://lobste.rs/s/eaxtmb/claude_for_legal_suite_plugins_for_legal
https://lobste.rs/s/fvqkke/new_claude_code_programmatic_usage
LLM üretimi metinlerin filtrelenebilmesi veya işaretlenebilmesi gerektiğine katılıyorum
Sorun şu ki, LLM üretimi bir yazı olsa da aslında konuya uygunsa buna “konu dışı” etiketi koymak çelişkili olabilir. Geçmişte yeni bir bayrak seçeneği de tartışılmıştı. Örn: https://lobste.rs/s/po97lh/new_tag_suggestion_genai_assisted
Hâlâ, https://lobste.rs/s/rkjpob/proposal_add_ai_generated_as_flag_reason bağlantısında tartışıldığı gibi, “konu dışı” bayrağını kötüye kullanmak yerine yeni bir bayrak seçeneğinin daha iyi olduğunu düşünüyorum
Filtrelenebilir ya da işaretlenebilir olması bana çok önemli görünmüyor. Bunu paylaşan kullanıcılar siteden kaldırılmalı. Bayraklar ya da etiketler gerçek bir yaptırıma dönüşmüyorsa israftır
Sanki sadece değersiz örnekleri seçiyormuşsunuz gibi görünüyor ama https://lobste.rs/s/hfnps5/osmand_s_faster_offline_navigation bağlantısındaki LLM üretimi metin, genel olarak çöp kalitesinde olsa da gerçekten konuya uygun özgün içerik de barındırıyor
Artık her türlü tire yasa dışı
--ifadesinden em dash üretirEndişe şu: Metnin LLM üretimi olup olmadığını kusursuz doğrulukla bilmek kolay değil. Yine de çoğu durumda bariz oluyor
Bazen bir şekilde “önemli” ya da “dikkate değer” bir yazı LLM üretimi olabilir. Örneğin CopyFail raporu var
Öneri: LLM üretimi içerik, büyük etkili güvenlik açıkları gibi istisnai durumlar dışında yasaklanmalı. Bir metnin LLM üretimi olup olmadığını değerlendirirken temkinli olunmalı ve sınır vakalarda şüphe yerine yarar ilkesi uygulanmalı. “İstisnai durumlar” moderatörlerin takdirine bırakılabilir ya da politika geliştikçe bu koşulların listesi belirlenip tekrar tekrar iyileştirilebilir