Bilimsel Sahtecilik Bir 'Endüstri'ye Dönüştü
(science.org)- Geniş kapsamlı analiz çalışmalarından bilimsel sahtekârlığın örgütlü biçimde yapıldığı bir 'endüstrileşme' durumu ortaya çıktı
- Makale üretim şirketleri, yayınevleri, akademik dergiler ve aracılar, karmaşık biçimde birbirine bağlanmış bir sahtekârlık ağı oluşturuyor
- Bazı editörlerin ve yazarların birbirlerine makale devrederek usulsüzlüklere ortak olduklarına dair örnekler bulundu
- Sahte makaleler son dönemde patlayıcı biçimde artış eğilimi gösterirken, tespit ve makale geri çekme hızının ötesine geçti
- Yayın ve işe alım değerlendirme sistemlerindeki bozukluklar ile teşvik yapıları, sahtecilik endüstrisinin büyümesini teşvik eden etkenler olarak işaret ediliyor
Bilimsel Sahtekârlık Endüstrisinin Durumu ve Analizi
Giriş: Artan Bilimsel Sahtekârlığın Yapısı
- Bilimsel sahtekârlıkla ilgilenen uzmanlar, şimdiye kadar sahte makalelerin endüstriyel ölçekte kitlesel ve sofistike bir şekilde üretildiği uyarısını yapmıştı
- Büyük ölçekli bir inceleme, makale üretim şirketleri, dergiler, aracılar ve yayınevleri gibi farklı aktörlerin ekonomik kazanç için sahtekârlığa dâhil olduğuna dair kanıtları doğruladı
- İlgili araştırma, binlerce makale, yazar ve editörü veri olarak kullanarak birbirine karmaşık biçimde bağlı bir sahtekârlık mekanizmasını analiz etti
Araştırma Bulgularına Genel Bakış
- Çalışma, Proceedings of the National Academy of Sciences'te yayımlandı; burada editör ve yazar ağının kötü niyetli makaleleri sistematik biçimde dergiye kaydettiği bir örnek bulundu
- Büyük bir organizasyonun aynı anda çok sayıda sahte makaleyi dergilere gönderdikten sonra yayımlattığı ve aracıların (broker) makale üretim şirketleriyle sorunlu makaleleri kabul eden dergiler arasındaki bağı kurduğu bir yapı tespit edildi
- Sahte makale sayısı toplam makalelerin küçük bir bölümünü oluşturuyor, ancak artış hızı genel bilimsel makale artış oranını önemli ölçüde aşıyor
Hatalı Editörler ve Makalelerin Analizi
- Araştırmacılar, kötü editörleri (corrupt editors) bulmak için, büyük bir dergi olan PLOS ONE'ı analiz hedefi olarak seçti; çok sayıda meta veri ve editör gerçek adlarının açık olması, anormallikleri saptamayı kolaylaştırdı
- PLOS ONE'daki makale geri çekme geçmişi ve PubPeer'de eleştirilmiş ya da sorunlu olarak işaretlenen makalelerin sorumlu editörleri tamamen belirlendi
- 33 editörün özellikle geri çekilmiş ve eleştirilmiş makaleleri tekrarlı biçimde üstlendiği görüldü
- Örnek: Bir editörün yönettiği 79 makaleden 49'u geri çekilmiş
- 2024 itibarıyla bu editörler toplam yayınların yalnızca %1,3'ünü üstlenirken, toplam geri çekilmiş makalelerin neredeyse üçte birini oluşturuyordu
Editör-Yazar İşbirliği Ağı
- Belirli bir yazarın makalelerini sürekli işleyen editör örnekleri çok sayıda bulundu; bunların çoğu aynı zamanda yazar ve editör konumunda idi
- Bu kişiler arasında rüşvet alma veya meslektaşlar arasında gayriresmî destek sağlama gibi çeşitli usulsüz işbirliği olasılıkları gündeme geldi
- Benzer eylemler, Hindawi gibi açık erişim yayınevlerine ait 10 civarı dergide de tekrarlanarak görüldü
- Yayıncı temsilcileri, ekibin ana hedefinin PLOS'un açık verisi olmasına rağmen, makale üretim firması sorununun bütün sektör için geçerli olduğunu vurguladı
Son Yakalanan Uzlaşma Vakaları ve Sorunun Genişlemesi
- Yakın dönemde Frontiers yayınevi de, 35 editör-yazar ağının çıkar çatışmasını gizleyip karşılıklı makale hakemliği yaptığı bir olayın ortaya çıkarılmasını ve 122 makalenin geri çekilmesini bildirdi
- Bu ağ, yedi yıldan fazla yayımcıda 4.000'in üzerinde makale yayımladı ve daha fazla araştırma gereksinimini gündeme getirdi
Aracılar ve Makale Üretim Şirketleri
- Basit bir üretim firması veya anlaşma ağı yaklaşımını aşarak, çok sayıda makalenin aynı anda birden çok dergiye gönderilmesini kapsayan örgütlü bir dağıtım eylemi doğrulandı
- Yaklaşık 2.000 görüntü-çakışma tartışması bulunan makale temel alınarak, birden fazla makalede aynı görüntünün görüldüğü kümeler izlendi
- Bu makale grubu, belirli dönemlerde az sayıda dergide yoğunlaşan bir yayım paternine sahipti
- Bu süreçte, sadece üretim firmaları değil, aracıların (broker) da bu sahtekârlık sistemine katıldığı görüldü
ARDA gibi Örgütlerin Örneği
- Hindistan’ın Chennai merkezli Academic Research and Development Association (ARDA) örneği incelendi
- Makale ve tez işleri, dergide çıktı elde etme vb. hizmetler sunuyor
- Kendi web sitelerinden araştırmacı adına makale yerleştirmesi ayarlıyor ve 250-500 dolar arasında ücret alıyor
- ARDA, kendi başına makale üreten bir şirket değil, yasal bir görünümde aracılık yapan bir yapı
- ARDA gibi yapılar, lisansüstü öğrencileri ve genç araştırmacıları ana hedef kitlesi haline getiriyor
Sahte Makale Patlaması ve Hız
- 55 veri tabanında işaretli şüpheli makale ürünlerinin yıllara göre istatistikleri temel alınarak analiz yapıldı
- 2016-2020 arasında, şüpheli makaleler 1,5 yılda bir iki kat artış gösterdi (genel makale artış oranının 10 katı)
- Geri çekilen makale ve PubPeer'deki sorun bildirimleri de sırasıyla 3,3 ve 3,6 yılda bir iki katına çıktı
- Ancak tespit hızının, sahte makale artış hızını yakalayamaması nedeniyle, bilim dünyasındaki sahtecilik oranı yükseliyor
Nedenler ve Yapısal Faktörler
- Küresel bilim sistemi büyümesi, düşük etki alanlı dergilerin artışı, anonimliğin yükselmesi, yayın sayısına odaklı değerlendirme sistemleri gibi birçok etken, zararlı bir kısır döngüyü tetikliyor
- Genç araştırmacılar, meslektaşlarıyla rekabette ayakta kalmak için makale üretim şirketlerine bağımlı kalma vakalarında hızlı artış gösteriyor
- Bazı tıp alanlarında bu tür sahte makaleler sistematik derleme ve meta analize bile sızarak, tedavi yöntemleri ve yeni ilaçların etkinliğine dair algının çarpıtılması riskini beraberinde getirebilir
Sonuç: Sanayi Ölçeğindeki Sahtekârlık ve Acil Yanıt İhtiyacı
- Önceden şüpheli görülen bir konuya karşın, bu çalışma durumu çarpıcı biçimde kanıtlamasıyla önem kazandı
- Araştırmacılar ve uzmanlar, bilim camiasının genelinin durumu anlamasını ve kesin bir karşılık geliştirmesini acil olarak vurguladı
- İşe alım, değerlendirme, yayın gibi farklı paydaşlar ilgili kişilerde net bir yaptırım uygulanması ve teşvik yapısında reform olmadan, sahtekârlık 'endüstri'si sorunu hızla yayılma riski taşıyor
1 yorum
Hacker News yorumu
Farklı türde bilimsel sahtekârlık olduğunu fark ettim; bu türler birbirine karıştığında yalnızca daha fazla kafa karışıklığı yaratıyor.
Kendi deneyimlerime göre tamamen uydurulmuş veriye rastlamak nadir. Ama sadece istenen sonuca ulaşmak için veriyi seçici kullanmak veya istatistiği hatalı uygulamak, Nature Portfolio gibi prestijli dergilerde bile çok yaygındır. Biyoloji ve tıp makalelerinin en az yüzde 20’sinde ciddi metodolojik hata olduğunu düşünüyorum.
Kasıt, bilgisizlik ve kaza—yeniden üretilebilirlik açısından birbirinden ayrıştırılamaz. Araştırmacının niyetini tespit etmenin bir yolu yoktur.
Kendi başımdan geçen bir makale örneğini paylaşmak isterim. Gerçekten iyi bir makale bulmuş gibi oldum; sorun çözülüyordu. Tier A bir konferansta sunuldu ve veri ile kodu yakında paylaşacaklarını söylediler.
Reinhart-Rogoff makalesini örnek verebilirim. Tek bir Excel hatası yüzünden çok sayıda politikacı kemer sıkma politikasını meşrulaştırdı; bunun 2. sorun mu yoksa 3a’ya mı denk geldiğini merak ediyorum.
Çinli bir profesörün doktoramın formüllerini, çizimlerini ve her şeyini kopyalayarak makale yayımladığı bir olayı hatırlıyorum. Başka bir laboratuvardaki bir Çinli öğrenci iki makaleyi karşılaştırınca fazlasıyla benzer olduğunu gördü ve bana bildirdi; ilgili üniversiteyle iletişime geçtim ama tek bir yanıt bile alamadım. Acayip bir “anı”.
Benzer bir deneyimim de oldu. İngiltere’de araştırma yaparken bir Çinli doktora sonrası araştırmacı yöntemimizi ve sonuçlarımızı Çin’deki birine iletmişti. Bizim bilmediğimiz dergilerde eş zamanlı yayımladılar ve bunu durduracak neredeyse bir şeyimizin olmadığını anladık.
Şaka olsun diye, yolculuk eden bir misafir gibi o sahtekâr profesörün odasını arayıp görünmesini öneririm.
Günümüzde AI ile ilgili yüksek teknoloji işlerinde, en iyi konferanslarda ilk yazar olarak makale yayımlama geçmişi bir gereklilik haline geliyor.
Yayın, sadece istihdam için değil; “uzman” vizesiyle göç için de avantajlı, bekleme süresi daha kısa, kota daha geniş, kazanımlar daha iyi.
En üst konferanslarda çıkan makaleler, bu “paper mill” ürünleri değil.
Son dönemde şirketlerin yayın geçmişini değerlendirirken bir makaleyi sahada yeniden ürettirip test ettiklerini de gördüm. Herkes bu sorunların farkına varmaya başladı.
“trust the science” sloganına (bilime güven) dair bir şüphem var.
Böyle bir şey “trust the science”i gerçek anlamda zayıflatmıyor. Bunun yerine, bireysel makalelere eleştirel olmayan bir güvenle yaklaşmamalıyız.
“trust the science”in işe yaramasının nedeni, bilimin genel olarak hâlâ iyi çalışmasıdır.
Haberlere göre yanlış makaleler eleştiriliyor ve geri çekiliyor.
Covid sonrası dönemden beri “trust the science” sloganını bile nadiren görür olduk.
Evet, bilimde yolsuzluk ve sahtekârlık çoktur. Ama bu, halkın ana gündemini belirleyecek ölçekte değildir.
Eskiden akademinin tam anlamıyla liyakat temelli olduğunu sanırdım. Sonra girdikten sonra şirket dünyasına göre daha rekabetçi ve insan zaaflarından arınmış bir sistemin olmadığını gördüm. Hepsi insan doğasından doğuyor.
Eski bir güneş pili araştırmacısı olarak bizzat aynı şeyleri yaşadım.
İş dünyasında çalıştığım için aslında akademi hakkında biraz farklı bakıyordum.
Akademinin özü gereği iyi niyetli ve bilinçli bir alan olduğunu düşündüm. Gerçekten de öyle düşünen birçok insan vardı.
“Sayre’s Law” diye bilinen ünlü bir söz var: “Akademik politikadaki acımasızlığın en keskin olmasının nedeni, oyunun para biriminin çok küçük olmasıdır.”
Ayrı bir şekilde ele alınması gereken şey:
Bu durum beni hiç şaşırtmadı. Bu, bilim insanı fazlalığı, aşırı rekabetçi pazar ve yayın odaklı performansı işgücü kararlarında tek kriter yapmanın kaçınılmaz sonucudur.
Burada geçen paper mill gibi sahte makale tipleri ABD’de nadiren görülür (ABD’de daha incelikli ve karmaşık başka dolandırıcılık türleri de var).
Nature’ın ne hale geldiğine bakın.
Bilimsel sahtekârlık eskiden de bir endüstriydi ve bence sinyal/gürültü oranı yeterince iyi olduğunda bir şekilde işliyordu.
“Publish or perish” kültürü araştırmayı tamamen metalaştırdı.
Son dönemde hileli yayınları yakalamak için “tortured phrases” (yapay çeviriye özgü yapay ifadeler) ilginç bir gösterge oldu.
Bu sahtekârlığın ne ölçüde yayıldığında bilime verilen desteği kesmemiz gerektiğini de soruyorum.
Online ortamda bilim desteğini savunanların bir kısmının “hayran” yaklaşımının, gerçek iç dinamikler veya bilimsel düşünceyle alâkasının az olduğunu görüyorum.
Bilimi kanserle karşılaştırmak iyi bir tartışma yöntemi değil.
1970’lerdeki genel refah artışındaki düşüş ve ani enflasyon üniversitelerde desteğin daralmasına yol açmış, ardından finansallaşma başlamış ve akademik mükemmeliyetden uzaklaşılmıştır.