Tanım
Aşırı uyum (overfitting)
Aşırı uyum, bir stratejiyi sinyale değil geçmişteki gürültüye göre ayarlamaktır. Tanım, uyarı işaretleri ve neden optimizasyonun varsayılan sonucu olduğu.
Aşırı uyum, bir stratejinin, piyasadaki tekrarlanabilir herhangi bir yapıyı değil geçmiş örneklemdeki gürültüyü tanımlayana kadar ayarlanmasının sonucudur. Belirtisi, parametrelerin seçilmediği veriler üzerinde performansın çökmesidir. Nadir bir başarısızlık biçimi değil, kısıtsız optimizasyonun varsayılan sonucudur: yeterli parametre ve yeterli denemeyle her veri kümesi kusursuzca uydurulabilir.
- Diğer adı
- eğri uydurma · veri gözetleme
Nasıl hesaplanır
Symptoms of an overfitted strategy:
· Performance collapses on data the parameters were not chosen from
· Small parameter changes produce large performance changes
· More rules and more conditions than the sample can support
· An equity curve that is smooth in-sample and jagged out-of-sample
Çalıştırdığınız her backtest bir maliyettir
Yüz varyantı deneyip en iyisini tutmak, hiçbirinin avantajı olmasa bile iyi bir örneklem içi sonucu garanti eder; kazanan gürültüye göre seçilmiştir. Denenen konfigürasyon sayısının sayılıp iskonto edilmesi gerekmesinin nedeni budur ve tek bir dürüst testi geçen bir stratejinin, bin deneme arasından kazanandan daha güçlü kanıt olmasının nedeni de.
Sağlamlık sıkıcı görünür
Parametreler optimumdan uzaklaştıkça performansı yumuşak biçimde bozulan bir strateji, keskin bir tepesi olana kıyasla gerçek bir şeyi tanımlıyor olma ihtimali daha yüksektir. Beş periyotluk bir geri bakış kârlı, altı periyotluk kârsızsa, strateji piyasanın bir özelliğini değil örneklemin bir yan ürününü bulmuştur.
Nasıl yanlış okunur
Örneklem dışı test bir tedavi gibi görülür. Oysa yalnızca bir testtir ve sonuçları stratejiyi revize etmek için kullanıldığı anda işlemez hale gelir: ayrılmış veriye bakıp bir şey değiştirdiyseniz, o veri artık örneklem içidir ve dürüst kanıt kaybolmuştur.
Ayrıca bakınız
Kaynaklar
- Pseudo-Mathematics and Financial Charlatanism: The Effects of Backtest Overfitting on Out-of-Sample Performance — Notices of the American Mathematical Society (Bailey, Borwein, López de Prado, Zhu)
- … and the Cross-Section of Expected Returns — Campbell R. Harvey, Yan Liu, Heqing Zhu — Duke University (published in the Review of Financial Studies)
- Data-Snooping Biases in Tests of Financial Asset Pricing Models — National Bureau of Economic Research (Andrew W. Lo, A. Craig MacKinlay)
Tanımlar eğitim amaçlıdır. Burada yatırım tavsiyesi yoktur ve anlatılan hiçbir ölçüt gelecekteki sonuçları öngörmez.
Tanımları bilmek kolay kısım
Drawdown’un ne demek olduğunu bilmek, ona ulaşınca duran bir sisteme sahip olmakla aynı şey değildir. QANTERION bu sınırları strateji çalışırken uygular.