Dunning-Kruger etkisi öz ilintidir

Dunning-Kruger etkisi öz ilintidir

• Dunning-Kruger etkisi, yetersiz kişilerin kendi yeteneklerini abartma eğilimini ifade eden bir olgu olarak bilinir.
• Bu etki 1999'da psikologlar tarafından ortaya kondu ve birçok araştırmada verilerle doğrulanıyormuş gibi göründü.
• Ancak bu etki aslında insan psikolojisiyle ilgili değil, öz ilinti denilen istatistiksel bir hatanın sonucudur.

Öz ilinti nedir?

• Öz ilinti, bir değişkenin kendisiyle korelasyon göstermesi durumudur.
• Örneğin bir kişinin boyu ölçüldüğünde, bu boy kendi kendisiyle mükemmel korelasyona sahiptir.
• Bir değişken denklemin iki tarafına da karıştığında öz ilintiyi fark etmek zorlaşır.

Dunning-Kruger etkisi

• Dunning-Kruger etkisi, öz ilintinin bir örneğidir ve aslında grafiğin yanlış yorumlanmasından kaynaklanır.
• Dunning ve Kruger, insanlara test uygulayıp kendi yeteneklerini değerlendirmelerini istedikten sonra, düşük performans gösterenlerin yeteneklerini abartma eğiliminde olduğunu bildirdi.
• Ancak bu sonuçlar gerçekte test puanları ile öz değerlendirme puanları arasındaki öz ilintiden kaynaklanmaktadır.

Dunning-Kruger etkisinin sökümü

• Dunning-Kruger grafiği, insanları test puanlarına göre gruplandırıp bunu yüzdelik dilimler olarak göstererek öz değerlendirmeyle karşılaştırır.
• Bu yöntem, test puanını kendi kendisiyle karşılaştırmakla aynıdır ve öz ilintiyi gizler.
• Nitekim rastgele veriler kullanıldığında bile Dunning-Kruger etkisinin ortaya çıkması bunun nedenidir.

Dunning-Kruger etkisinin yeniden üretilmesi

• Gerçek verilerle Dunning-Kruger etkisini anlamaya çalışıldığında, özgün verilerden farklı sonuçlar ortaya çıkar.
• Deneyi yeniden üretmeye çalışıldığında, ham veriler rastgele görünür ve Dunning-Kruger etkisine dair hiçbir iz taşımaz.
• Ancak veriler farklı şekilde analiz edildiğinde, Dunning-Kruger etkisi varmış gibi görünebilir.

Dunning-Kruger etkisinin çöküşü

• Araştırmacıların aslında rastgele sayılar kullanmış olmalarına rağmen Dunning-Kruger etkisini yeniden üretmesi, öz ilinti yüzündendir.
• Bu hata fark edildikten sonra, Dunning-Kruger grafiğinin gerçekte öz ilintiye dayandığı anlaşılmıştır.

Dunning-Kruger etkisinin yokluğu

• Dunning-Kruger etkisi istatistiksel olarak geçerli bir yöntemle ölçüldüğünde, etkinin ortadan kalktığı görülür.
• Eğitim düzeyine göre gruplandırılmış kişilerin öz değerlendirme hataları ölçüldüğünde, ortalama hatanın 0 civarında kaldığı ve Dunning-Kruger etkisine dair kanıt bulunmadığı görülür.

Yetersiz olup bunun farkında olmayan insanlar

• Dunning ve Kruger'ın istatistiksel bir hata yapmış olması bir yanlışlık olabilir; ancak makaleleri, yetersiz kişilerin kendi yetersizliklerini fark etmediği iddiasını içerir.
• Oysa gerçekte, istatistiksel yetersizliği ortaya koyanlar Dunning ve Kruger'ın kendileriydi; çünkü öz ilintiyi psikolojik bir etkiyle karıştırmışlardı.

GN⁺ görüşü

Bu yazıdaki en önemli nokta, Dunning-Kruger etkisinin gerçekte insan psikolojisiyle ilgili olmayıp öz ilinti adı verilen istatistiksel bir hataya dayanmasıdır. Bu, araştırmacıların verileri yorumlarken düşebileceği tuzakları gösterir ve bilimsel bulguların nasıl hatalı istatistiksel yorumlar yüzünden yanlış anlaşılabileceğine örnek oluşturur. Bu tür hataları anlamak, araştırma sonuçlarını yorumlamak ve doğrulamak açısından önemli bir ders sunar; bu da yalnızca junior yazılım mühendisleri için değil, tüm bilim alanlarındaki araştırmacılar için yararlı bir bilgidir.

[GN⁺]

Hacker News görüşleri

• Yorum yapan kişi, istatistik ya da psikoloji hakkında yeterince bilgi sahibi olmadığını kabul ederken, D&K araştırmasının dedesinin söylediği "ne kadar çok bilirsen, bilmediğin şeylerin o kadar fazla olduğunu fark edersin" sözüne benzediğini düşündüğünü belirtiyor. Ayrıca birçok insanın gerçekte bildiğinden daha fazlasını bildiğini sanma eğiliminde olduğunu, bunun muhtemelen kendisi ve ilgili makalenin yazarı için de geçerli olabileceğini düşünüyor.
• Başka bir yorumcu makalenin iddiasına katılmıyor ve D-K grafiğinin yalnızca öz-korelasyonun bir sonucu olduğu iddiasına karşı çıkan bir yazı paylaşıyor. Aslında performans ile performans değerlendirmesinin bağımsız olduğunu varsaymanın oldukça şaşırtıcı olduğunu, D-K çalışmasının performans ile öz değerlendirme arasında bir korelasyon olduğunu gösterdiğini ama bunun beklendiği kadar güçlü olmadığını açıklıyor. Bunun yerine tutarlı bir yanlılık gösterdiğini ve ilginç sonucun da bu olduğunu söylüyor.
• Önceki tartışmada da belirtildiği gibi, yazar insanların kendi yeteneklerini tahmin etmede çok kötü olduğunu ve bu nedenle öz değerlendirmenin koşulsuz rastgele bir değişken gibi varsayıldığını öne sürüyor. Gerçek yetenek yüksek olduğunda, öz değerlendirmenin rastlantı sonucu gerçek yetenekten daha düşük çıkma olasılığı daha yüksektir. Bu eleştiri, insanların gerçekten kendi yeteneklerini bu kadar yanlış değerlendirip değerlendirmediği sorusunu gündeme getiriyor.
• Yazarlar "X - Y'ye karşı X" analizi yapmış, ancak en büyük sorun bu değil. Yazarlar 0 ile 1 arasına dönüştürülmüş ve sınırlandırılmış iki ölçümü birbirinden çıkarmış. Uç değerlerde ne olur? En yüksek performans gösterenler, performanslarını ne kadar fazla abartabilir? Zaten neredeyse 1'e ulaştıkları için bunu pek yapamazlar. Eğer aynı oran ve büyüklükte hem fazla hem eksik değerlendirme yapıyorlarsa, dönüştürülmüş değerdeki üst sınır etkisi grafiğin onların daha sık kendilerini düşük değerlendirdiğini gösteriyormuş gibi görünmesine yol açar.
• Nicolas Boneel ile yazar arasındaki yorum tartışması ilginç bulunuyor; Nicolas, makaleyi okurken aklına gelen kuşkuları dile getiriyor. DK etkisinin özü, insanların kendi becerilerini yanlış değerlendirmesi olduğundan, eğer insanların beceri düzeylerini rastgele tahmin ettiğini varsayarsanız sonucun yeniden üretilebilmesi doğaldır.
• Yazarın kullandığı "öz-korelasyon" terimi, istatistikte yaygın kullanılan anlamından farklı. "Öz-korelasyon" normalde zaman serisi verisinin belirli bir zaman gecikmesiyle kendi kendisiyle olan korelasyonunu ifade eder; OP'deki kullanım şekli, belirtildiği gibi, istatistik bilenler için kafa karıştırıcı olabilir.
• Yazarın hayal ettiği dünyada, insanların puan tahminleri gerçek puanlardan bağımsızsa, DK etkisinin gerçekten var olduğu söylenebilir. Düşük puan alanlar puanlarını abartma, yüksek puan alanlar ise olduğundan düşük tahmin etme eğilimindedir.
• "Yanlılık" terimi etrafında bir karışıklık var. Eğer öz değerlendirme rastgele yapılıyorsa, yüksek performans gösterenlerin hepsi kendilerini olduğundan düşük değerlendirecektir; ancak bu, düşük değerlendirmeye yönelik bir yanlılık anlamına gelmez. D-K grafiği başka bir yanlılık gösterir ve çoğu insanın kendini ortalama gördüğü fikriyle uyumludur. Bu durumda yüksek performans gösterenler ortalamayı olduğundan yüksek, düşük performans gösterenler ise olduğundan düşük tahmin eder.
• Makaledeki "öz-korelasyon" tanımının Wikipedia'daki tanımdan farklı olduğu belirtiliyor. Makaledeki tanım zaman gecikmesiyle ilgili değil ve D-K bağlamında buna "öz-korelasyon" demek yanlış bir kullanım.
• Eğer beceriksiz kişilerle becerikli kişiler ortalamada aynı öz değerlendirmeyi yapıyorsa, beceriksiz olanlar kendilerini abartacak, becerikli olanlar ise kendilerini olduğundan düşük değerlendirecektir. Bunun tek başına bile önemli bir sonuç olabileceği ve aslında bir korelasyon bulunduğunun dikkate değer olduğu söyleniyor.