Doğrulama Eşiği, çekici araştırma ile canlı portföy arasında duran doğrulama adımıdır: bir strateji ancak her istatistiksel kontrolü — aşırı uyum, veri tarama yanlılığı, sağlamlık — geçerse kullanıma açılır ve hesaplanamayan bir kontrol geçmiş değil, başarısız sayılır.
Neden önemli
Yeterince strateji ararsanız biri tesadüfen mükemmel görünür. Kapı olmadan terfi etmesi en olası olan, en iyi backtest'e sahip olduğu için en çok aşırı uydurulmuş sonuçtur.
Nasıl çalışır
Tipik kontroller arasında düzeltilmiş (deflated) Sharpe oranı, geriye dönük testte aşırı uyum olasılığı, veri tarama yanlılığıya karşı gerçeklik testi, ilerleyen pencereli doğrulama ve arındırılmış çapraz doğrulama ve seçilen parametrelerin sağlamlığı vardır. Eşikler kanıt okunmadan önce beyan edilir.
Opulence Alpha nasıl uygular
Opulence Alpha'da kapı; asgari düzeltilmiş Sharpe oranını, azami geriye dönük testte aşırı uyum olasılığını ve azami gerçeklik testi p-değerini açık girdi olarak ister, her eşiği onu aşan sayının yanına kaydeder ve bir stratejiyi ancak hiçbir kontrol başarısız olmadığında ve hiçbiri atlanmadığında yayımlar. Optimize edilmiş parametrelerin, bir insanın yazacağı daha basit bir ızgaraya yuvarlandığında da ayakta kalması gerekir.
Doğrulama Eşiğinin kontrolleri →İlgili kavramlar
Sorular
Atlanan bir kontrol neden yayını engeller?
- Çünkü hesaplanamayan bir istatistik iyi çıkmış bir istatistik değildir. Onu geçmiş saymak, zayıf kanıtın içeri sızmasının yoludur.
Kapıdan geçmek gelecekteki performansı garanti eder mi?
- Hayır. Doğrulama bilinen araştırma hatalarını giderir; piyasa belirsizliğini gideremez. Sonuçlar sonradan canlıda ölçülür.
Bıçak sırtı parametre nedir?
- Hafifçe oynatıldığında iyi sonucu kaybolan bir ayar. Yalnızca tek bir kesin değerde çalışan strateji gürültüye uydurulmuştur.
Kaynaklar
- Bailey, D. & López de Prado, M. (2014). The Deflated Sharpe Ratio. Journal of Portfolio Management.
- Bailey, D., Borwein, J., López de Prado, M. & Zhu, Q. (2017). The Probability of Backtest Overfitting. Journal of Computational Finance.
- White, H. (2000). A Reality Check for Data Snooping. Econometrica.
Araştırma yöntemleri hakkında eğitim içeriğidir. Yatırım tavsiyesi değildir.