Kristal Küre Trading Oyunu

• Crystal Ball Challenge, katılımcılara WSJ’in birinci sayfasını bir gün önceden gösterip S&P 500 ve 30 yıllık ABD tahvilinde işlem yaptıran bir deneydi; gelecekteki haberleri bilmenin bile bunu kâra çevirmeyi kolaylaştırmadığını gösterdi
• 2023 Kasım’ındaki yüz yüze gözetimli deneyde finans eğitimi almış genç 118 katılımcı $50 ile başladı, ancak ortalama ödeme $51.62 oldu ve bu sonuç başabaş düzeyinden istatistiksel olarak ayırt edilemedi
• Yön tahmininde isabet oranı toplamda %51,5 idi ve tahvil tahminleri hisselerden daha iyiydi, ancak katılımcılar daha iyi bildikleri varlıklara daha büyük bahis yapamadı
• İşlem günlerinin yaklaşık %30’unda 20x’in üzerinde kaldıraç kullanıldı ve %4’ünde bu oran 60x’i aştı; aşırı risk alma nedeniyle katılımcıların yaklaşık yarısı zarar etti ve her 6 kişiden 1’i iflas etti
• Davet edilen deneyimli 5 makro trader’ın tamamı kâr etti ve varlıklarını ortalama %130 artırdı; bu da gelecekteki bilginin değerinin büyük ölçüde yatırım büyüklüğünü belirleme becerisine bağlı olduğunu gösterdi

---

Deney tasarımı: WSJ’in birinci sayfasıyla bir gün önden işlem yapmak

• Crystal Ball Challenge, 1989 yapımı Back to the Future II filmindeki spor sonuçları yıllığı fikrinin finansal piyasa deneyine uyarlanmış haliydi
• 2023 Kasım’ında finans eğitimi almış genç yetişkin 118 kişi, yüz yüze gözetimli bir ortamda katıldı
• Her katılımcıya $50 verildi ve S&P 500 endeksi ile 30 yıllık ABD Hazine tahvili vadeli işlemlerinde pozisyon almasına izin verildi
• Bilgi koşulları şöyleydi
  • WSJ’in birinci sayfası bir gün önceden verildi
  • Hisse ve tahvil fiyat verileri siyahla kapatıldı
  • İşlem yapılacak günler 2008 ile 2022 arasındaki her yıldan 1 gün olmak üzere toplam 15 gündü
  • Her tarihte hisse ve tahvil için ayrı ayrı 1’er işlem yapılabiliyordu
• Para ödülü olmayan web sürümü de mevcut: Crystal Ball Trading Challenge
• Yazının yazıldığı an itibarıyla sitede 1.500’den fazla kişi oyunu oynamıştı

Gözetimli deney sonuçları: ortalama neredeyse başabaş

• Katılımcıların ortalama ödemesi $51.62 oldu; bu da başlangıç tutarına göre yalnızca %3,2 artış anlamına geliyor
• Bu sonuç istatistiksel olarak başabaş seviyesinden ayırt edilemedi
• Getiri dağılımı ortalamadan daha kırılgandı
  • Yaklaşık %45 zarar etti
  • %16 iflas etti
  • Yaklaşık %20, azami ödeme olan $100’e ulaştı
• Katılımcılar toplam yaklaşık 2.067 işlem yaptı ve kişi başına ortalama yaklaşık 18 işlem düştü
• Kişi başına azami işlem sayısı 30’du; gerçek işlem sayısının daha düşük olmasının nedenleri arasında iflas ve işlem fırsatını pas geçme vardı

Yön tahmininden daha büyük sorun: pozisyon büyüklüğü

• Katılımcılar hisse ve tahvil yönünü toplamda %51,5 oranında doğru tahmin etti
  • Hisse işlemlerinde yön isabeti %48,2
  • Tahvil işlemlerinde yön isabeti %56,2
• Tahvilde isabet daha yüksek olmasına rağmen, işlemler tahvile kıyasla hisselerde %40 daha fazla yapıldı
• Bahis büyüklüğü, doğru tahmin olasılığıyla neredeyse hiç bağlantılı değildi
  • 30 işlem fırsatının 8’inde katılımcı grubu kabaca 2’ye 1 oranında doğru yöne yığıldı, ancak bu durumlarda daha büyük bahis yapmadı
  • Hisse işlemlerinde kaldıraç ile kazanma oranı arasındaki korelasyon 0 idi
  • Tahvil işlemlerinde bu değer -0.1 oldu
• Ortalama kaldıraç hissede 13x, tahvilde 10x idi
  • Yalnızca 5x’in üzerindeki kaldıraçlı işlemlere bakıldığında hisse 22x, tahvil 20x idi
• İşlem günlerinin yaklaşık %30’unda 20x’in üzerinde kaldıraç kullanıldı
  • %4’ünde 60x’in üzerindeydi
  • 17 kez, yani işlem günlerinin biraz üzerinde %1’inde, 100x kaldıraç kullanıldı
  • 100x kaldıraç, tüm sermayenin kaybedilme olasılığını neredeyse %50’ye yaklaştırabiliyordu

Basit pozisyon ayarıyla bile zararlar azaltılabilirdi

• Katılımcılar her işlemde sabit ve makul bir kaldıraç uygulasaydı sonuçlar iyileşebilirdi
• Deney koşullarında makul günlük oynaklık tahminleri şu düzeydeydi
  • Hisse: %1,5~%2
  • Tahvil: %1~%1,5
• %55 doğruluk varsayımı altında Kelly kriteri yaklaşık şu büyüklükleri işaret ediyordu
  • Hisse: 6x
  • Tahvil: 8x
• Tüm katılımcılar bu büyüklüklerle işlem yapsaydı ortalama getiri oranının %10 olacağı hesaplandı
• Sonuçların varyansı da yaklaşık %45 azalacaktı
  • Gerçek deneyde yaklaşık %28, sermayesinin %50’sinden fazlasını kaybetti
  • 6x·8x pozisyon ayarında %50’den fazla kaybedenlerin oranı %4 olurdu
  • %75’ten fazla kayıp yaşayan ya da iflas eden kimse olmayacağı hesaplandı

Haber yorumlama kurallarının yaratabileceği fark

• Katılımcılar manşet haberleri basit kurallarla makroekonomik sinyallere çevirseydi daha yüksek isabet oranı elde edebilirdi
• Tahvil tarafında yöntem; güçlü ekonomi, yüksek enflasyon, yüksek enerji fiyatları, güçlü euro ve daha az gevşek bir Fed sinyali görüldüğünde tahvilde short açmaktı
• Hisse tarafında yöntem; güçlü ekonomi, düşük enflasyon, yüksek enerji fiyatları, güçlü euro ve daha gevşek bir Fed sinyali görüldüğünde hissede long açmaktı
• Bu kurallar uygulandığında isabet oranları şöyle oldu
  • Hisse: %58
  • Tahvil: %64
• Bu yaklaşımın işlem günü başına ortalama %6,1 getiri ve sermayede 2,4x büyüme sağlayacağı hesaplandı
• İlgili haber olmadığında ya da iki yöndeki sinyal sayısı eşit olduğunda işlem yapmamak makul bir seçenekti

Deneyimli makro trader’ların sonuçları

• Davet edilen deneyimli makro trader 5 kişinin tamamı kârla kapattı
• Bunlar şu geçmişlere sahip, çok seçilmiş bir gruptu
  • ABD’nin en büyük 5 bankasından birinde trading başkanı
  • İlk 10 makro hedge fonundan birinin kurucusu
  • İlk 10 makro fondan birinde kıdemli trader
  • ABD’nin en büyük 3 primary dealer’ından birinde eski kıdemli devlet tahvili trader’ı
  • Eski Jane Street kıdemli trader’ı
• Ortalama olarak başlangıç varlıklarını %130 artırdılar ve medyan getiri %60 oldu
• İşlem fırsatlarının yaklaşık üçte birinde hiç bahis yapmadılar; haberin piyasa etkisinden emin oldukları günlerde ise büyük pozisyon aldılar
• Yön isabet oranları %63 ile 118 katılımcının %51,5’lik oranından yüksekti
  • Tahvil isabeti %71
  • Hisse isabeti %56
• Sonuç farkı yalnızca yön tahmininden değil, daha makul pozisyon büyüklüğü belirleme kararlarından da kaynaklandı

Web oyuncuları ve tekrar oyunun uç örnekleri

• Web’de eğlence için oynayan yaklaşık 1.500 kişinin sonuçları, gözetimli deney katılımcılarından daha kötüydü
• Web oyuncularının medyan sonucu, başlangıç sermayesinin yaklaşık %30 kaybı oldu
• Bunların yalnızca %40’ı kârla bitirdi, %36’sı ise iflas etti
• 6 kişi, tekrar tekrar oynayarak her günün hisse ve tahvil sonucunu öğrendikten sonra kusursuz bir skor elde etti
• Bu kişiler tüm işlemlerde doğru yöne azami büyüklükte bahis yaparak başlangıç sermayesini 70.575 katına çıkardı

Kristal kürenin ekonomik değerinin hesabı

• WSJ’in birinci sayfasının 15 yüksek oynaklıklı işlem gününde bir gün önceden verilmesini sağlayan kristal kürenin değeri hesaplandı
• Ortalama beklenen getiri / risk oranı 0.2 olarak alındı; bunun piyasa yönünü %60 doğrulukla tahmin etmeye karşılık geldiği varsayıldı
• Tipik riskten kaçınan bir yatırımcının, 1 standart sapmalık sonuca karşı sermayesinin %10’unu riske attığı varsayıldı
• Buna göre işlem başına beklenen getiri %2, riske göre düzeltilmiş getiri ise yaklaşık %1 olarak hesaplandı
• Kristal kürenin vakaların %75’inde işe yarar haber verdiği kabul edildiğinde, 24 işlem sonunda kesinlik eşdeğeri servet 1,27x oldu
• Bu hesaplamada kristal küre için ödenebilecek azami tutar, servetin %21’i olarak çıktı
• Yılda bir kez bir günlük gazeteyi önceden almanın Sharpe ratio’su yaklaşık 0.2~0.3; bu seviye, çoğu kişinin bir yıllık borsa yatırımı için düşündüğü Sharpe ratio’nun altında

Sınırlamalar ve dikkat edilmesi gerekenler

• Başlangıç sermayesinin $50 olması, nispeten küçük bir ödül anlamına geliyordu; bu nedenle katılımcılar tüm varlıklarıyla işlem yapacak olsalar farklı davranabilirdi
• Şirket bazlı bilgileri önceden alıp tekil hisselerde işlem yapabilselerdi sonuçlar daha iyi olabilirdi
• Bazı katılımcılar, birinci sayfa haberlerinin bağlamını, özellikle de o dönemde piyasanın en çok neden endişe ettiğini bilselerdi bu bilginin daha faydalı olacağını söyledi
• Oyunda izin verilen azami kaldıraç, çoğu yatırımcının vadeli işlemlerle erişebileceği seviyenin üzerindeydi
• Out-of-the-money opsiyonlar bir alternatif olabilir, ancak maliyetleri çok daha yüksektir
• Deney, pozisyonun ertesi gün kapanışa kadar taşınabileceğini varsaydı; gerçekte ise gün içi hareketler sermayeyi önce tamamen silebilir
• Gerçek yatırımcıların tüm varlıklarını sınırsız zarar ihtimaline maruz bırakması zordur ve zararı sınırlamanın yolları şunlardır
  • Zararı yatırılan sermayeyle sınırlayan sınırlı sorumluluk yapılarıyla işlem yapmak
  • Kaldıraçlı işlemlerde azami zararı sınırlamak için kısa vadeli out-of-the-money opsiyonlar satın almak
• Sınırlı sorumluluk yapılarında istenen kaldıraç düzeyini elde etmek zor olabilir ve opsiyon yaklaşımında opsiyon primi maliyeti vardır

Sonuç: gelecek bilgisinden daha önemli olan şey belirsizlik altında karar verme

• Nassim Nicholas Taleb’in “Bir yatırımcıya ertesi günün haberlerini 24 saat önceden verirseniz, bir yıl içinde iflas eder” önermesi deney koşullarıyla birebir aynı değildi
• Deney yalnızca 15 günlük birinci sayfayı sağladı ve katılımcılar oyun içinde en fazla $100 düzeyinde parasal risk aldı
• Buna rağmen sonuçlar, gelecekteki haberlerin tek başına yeterli olmadığı yönünde güçlü bir tablo çizdi
• Finans sektörünün kendi kristal küre geliştirme çabaları, makul yatırım büyüklüğü belirlenmeden bunun değer üretmesinin zor olacağını hesaba katmalı
• Finans eğitimi almış 118 katılımcının sonuçları, genç finans profesyoneli adayları için belirsizlik altında karar verme ve yatırım büyüklüğü belirleme eğitiminin önemli olduğunu gösterdi
• Deneyimli 5 trader’ın tamamının kâr etmesi ise ihtiyari yatırımda da öğretilebilir beceriler olabileceğine işaret ediyor

[GN⁺]

Hacker News yorumları

• Burada hemen göze çarpan iki şey var: a) zaman ufku neredeyse yok, bu yüzden fiilen kısa vadeli al-sata yakın.
  Ne olacağını bilmek tek başına yetmiyor; diğer tüm katılımcıların kısa süre içinde “doğru davranışı” sergilemesi gerekiyor ki yazıda da söylendiği gibi bu sık olan bir şey değil.
  b) WSJ artık eskisi kadar iyi bir haber kaynağı değil, bu da oyunu daha zorlaştırıyor. Yine de bazen büyük bir olay patlak verdiğinde bir gün önceki haber işe yarayabilir. Örneğin 9/11 öncesinde havayolu hisselerinde açığa satış yapmak gibi.

  • “WSJ artık eskisi kadar iyi bir haber kaynağı değil” fikrine katılmak zor. WSJ’nin birinci sayfası o günün iş dünyası haberlerini gayet iyi özetlemiyor mu?
  • Belirli kısa vadeli olaylara tepki vermenin özellikle ilginç olduğuna ikna olmuş değilim.
    “Bu gerçekten borsayı düşürür” denebilecek oldukça öngörülebilir özel durumlar olabilir, ama daha ilginç akış 10 yıl ya da daha uzun süren uzun vadeli trendler.
  • Benim anladığım kadarıyla gün içi al-sat çoğunlukla çizgi grafiklerde makul görünen desenler bulup onlara anlam yüklemeye benziyor.
    Bir de zaten yüksek frekanslı işlem şirketleri ve Goldman Sachs’ta yüksek maaşlı 3.000 profesyonel trader tarafından fiyata yansıtılmış kamuya açık bilgilerle işlem yapmaya çalışmak demek.
  • Blog yazısında son 15 yıldaki Washington Post makalelerinden rastgele seçildiği söyleniyor gibi.
    O gazetenin ne zaman kötüleştiğini düşündüğüne bağlı olarak, oyunda o tarihten sonraki günleri atlayıp b) sezgini test edebilirsin gibi görünüyor.
  • 9/11 iyi bir örnek. Bir gün önceden bunun olacağını bilsen bile bu deneyde hiçbir kazancın olmazdı. Çünkü o gün piyasa açık değildi.

• Çoğu insan için püf nokta, gerçekten büyük bir içgörü oluşana kadar asla işlem yapmamaktır.
  O zamana kadar S&P 500’de kalmak daha iyidir; veri madenciliği yapmamak gerekir.
  İşlem yapmaya değer iyi başlıklar nadirdir. Felaketler, seçim zaferleri, faiz değişiklikleri olabilir.
  Daha iyisi içeriden öğrenenlerin ticareti olmasa da içeriden bilgiye yakın bir şeydir: Bir şirkette çalışıp o şirketin güçlü yanlarını fark etmişsindir ama piyasa onu hâlâ sıradan bir şirket gibi görüyordur. IPO öncesi ya da hemen sonrası en iyi zamandır.

  • Seth Klarman Margin of Safety’de bunu şaşırtıcı derecede net söyler. Hedef her zaman 1 dolar değerindeki şeyi 1 dolardan ucuza almaktır.
    Bir varlığın değerini piyasa değil, sen kendin değerlendirmelisin; bu da genellikle ciddi araştırma gerektirir.
    Bunu yapma isteğin yoksa Klarman da endeks yatırımının fena olmadığını ama göz kamaştırıcı da olmayacağını açıkça söyler. Özellikle endeksler hisseleri yatırım açısından iyi nedenlerle değil, dengelemek zorunda oldukları için alıp satar.
    Haberlere ve olaylara göre işlem yapmak özünde kumara yakındır; ama zaten yatırım yapmaya karar vermiş ve fiyatın kriterlerine uymasını bekliyorsan, başkalarının haberlere verdiği tepkiyi alım zamanlaması olarak kullanabilirsin.
  • Yazıda da deneyimli trader’ların aynı testte %60–130 getiri elde ettiği, öğrencilerin ise tek haneli getiri ya da zararlarla kaldığı anlatılıyor.
    Deneyimli trader’lar işlem fırsatlarının yaklaşık 1/3’ünde hiç bahse girmedi.
    Bu tür işlem meydan okumalarında her zaman göze çarpan şey tam da bu. Sürekli piyasada olman gerekiyormuş gibi gösteriyor ve birçok sıradan insan buna kanıyor.
  • Çoğu durumda IPO’dan hemen sonra satmak iyi değildir. Çünkü içeridekiler ve erken dönem satıcılar vardır.
    Giriş noktası olarak fena görmüyorum. Yine de IPO işlemleri genel olarak büyük risk taşır; istikrarlı ve oturmuş hisseleri seçmek daha iyidir.
  • Başlıklar üzerinden tam zamanlı işlem yapan insanlar tanıyorum; bir ara günlük ortalama adım sayıları 200 adımın altındaydı.
    Yine de getirileri iyi.
  • Margin Call’dan yapılan alıntı çok kullanılır, ama dünyayı gördükçe bunun safça bir bakış olduğuna daha çok inanıyorum.
    “Bu işte geçinmenin üç yolu vardır: ilk hareket eden olmak, daha akıllı olmak ya da hile yapmak.”
    Bu cümlede Boolean operatörü yanlış. Virgüller arasındaki örtük OR, AND’e dönüşmeli. Nedeni basit: Hile yapmaya niyetin yoksa, o avantajı hile yapanlara bırakmış olursun.

• İlginç bir yazı, ama aşırı deneyimli 5 trader’a tarihsel olayları kullanıp CPI ya da faiz açıklamaları gibi finansal açıdan önemli etkinliklerin başlıklarını göstererek hafızalarını güçlü biçimde tetiklersen, sonuçların epey büyük kısmını hatırlamaları muhtemel.

  • Doğru. Modeli eğitim verisi üzerinde değerlendirmek gibi.
  • Araştırma, insanların bu bilgiyi istikrarlı bir avantaja çeviremediğini söylüyor; senin açıklamansa bilgi sızıntısının neden istikrarlı bir avantaj yaratabileceğini anlatıyor.

• Piyasanın tüm zamanların zirvesinde olmasından endişe edip düzeltme gelince girmek için nakit tutan biriysen, beklemek yerine piyasaya şimdi girmenin daha iyi olduğunu görmelisin.
  Düzeltmenin ne zaman geleceğini kristal küreyle biliyor olsan bile mesele bu.
  https://ofdollarsanddata.com/even-god-couldnt-beat-dollar-co...

• Oldukça eğlenceliydi. 1 milyon doları 4,5 milyon dolara çıkardım; bunun çoğu birkaç büyük bahisten sonra kalanını güvenli oynamam sayesinde oldu.
  Elbette gerçek hayatta yarının haberlerini alamadığım için %100 endeks fonundayım.

  • Hangi endeks fonu olduğunu merak ettim.

• Bir dakika, bu meydan okumada tarihi bilemiyor muyuz? Şu an deniyorum ve o dönemin havasını bilmeyince garip bir meydan okuma gibi hissettiriyor.
  Şu an birinci sayfaya bakıyorum ve aklımdan sadece “Bu 2008 mi?” geçiyor.
  Sadece bir gün sonrasına dair bilgi olup başka hiçbir bağlam yoksa elbette zor. Gerçek hayatta bağlam da olur.

  • Kesin tarihi bilirsen, belirli bir tarihte yaşanan büyük borsa düşüşünü hatırlamak çok kolaylaşır.
    Yine de birçok soruda 1–2 haftaya kadar daraltmaya yetecek kadar ipucu vardı.

• Bu oyunu birkaç kez oynadım ama sürekli hata verdi. Birkaç işlem yapıp 2,3 milyon dolar yaptım; sonra “trade” düğmesi çalışmayı bıraktı.
  Vivaldi kullanıyorum, belki bir etkisi olmuş olabilir.

• Başlık ve ilk sonuç yanıltıcı; gerçek sonuç basit: finans haberlerinin çoğu gürültüdür.
  Onu kullanmak için iyi bir filtre gerekir.
  Uygun bir gelecekteki anı, örneğin birkaç dakika sonrası ya da daha ilerideki fiyat verilerini az da olsa istikrarlı biçimde gösteren bir kristal küren varsa, yetkin biri inanılmaz zengin olabilir.

• İşlem yapmadığım için düşük değerli bir tahmin ama bu daha çok kristal kürenin ne olduğu sorusuna benziyor.
  Geleceği göstermesi, o geleceği ortaya çıkaran dinamiklere dair içgörüyü bedavaya vermez. Ayrıca birden fazla etken ya da taraf arasında hangi dinamiklerin işlediğini anlamak için geleceği bilmek şart da değildir.

  • Bu çalışma pek yararlı değil ya da yanıltıcı. Çünkü gerçek bir durugörü sağlamayan şeyi kristal küre diye tanımlıyor.
    Geleceği görebiliyorsun ama asıl önemli bilgi eksik; o zaman bu kristal küre değildir.

• “Muhtemelen bu tür kaldıraç istismarı...” diyor ama bunun nedeni sadece küçük bir oyuncak oyun olması.
  The Economist’in tek sayfalık iş dünyası bölümünü kullansan bu deney tamamen farklı ilerlerdi. WSJ’nin birinci sayfası kelimenin tam anlamıyla tıklama tuzağına yakın olabilir.