A/B testinde dönüşüm oranı yükseldi ama şirket neden zarar edebilir? (ROI hesaplama aracı)

Merhaba. A/B testlerinin gerçek finansal etkisini hesaplayan bir araç olan PRISM'i yapıp paylaşmak istedim.

• Problem farkındalığı

PM/PO olarak çalışırken dönüşüm oranı (CR) %2 arttı diye buna sık sık "kazanan" deney denilip yayına alma kararı veriliyor.

Peki bunun arka planında ortalama sipariş tutarı (AOV) %4 düştüyse? Trafik ölçeğine göre şirket yıllık bazda on milyonlarca won zarar bile edebilir.

Metriğin tuzağına düşmeden, deney sonuçlarını tamamen "finansal bakış açısıyla (Net Profit)" doğrulamak istediğim için bunu yaptım.

• Temel özellikler (giriş yapmadan hemen kullanılabilir)

Hassas kârlılık hesabı: Trafik, CR, AOV değişim miktarı, marj oranı gibi değerleri girince yıllık net kârdaki artış/azalış tutarını anında hesaplar.

PDF dışa aktarma: Sezgisel bir waterfall chart içeren raporu anında görebilirsiniz.

• Paylaşım dostu bağlantı

Hesaplanan sonuç ekranını ekip üyeleriyle olduğu gibi paylaşabileceğiniz bir URL'yi (parametreler dahil) oluşturur.

Üyelik veya giriş gibi uğraştırıcı süreçlerin tamamını kaldırdım. Sadece sayıları girerseniz sonucu hemen görebilirsiniz.

• Bağlantı : https://prizm-v2-6dohhi.flutterflow.app/

Henüz MVP aşamasında olduğu için eksikleri çok.

Aşırı uç metrikler girildiğinde çalışacak savunma hattı (threshold) mantığı gibi şeyleri de kendimce uygulamaya çalıştım,

Sahada çalışan kişilerden doğrudan geri bildirim veya hata bildirimi rica ediyorum!