İlk soru: gerçek mi gerçekleşebilir mi
Bir backtest getirisi, “geçmişte olsaydı ne olurdu” sorusunun cevabı. Ama o “olsaydı”, birçok varsayıma dayanıyor.
O varsayımlar gerçekçi değilse, backtest getirisi gerçekte elde edilemeyecek bir sayı. Kağıt üstünde var, pratikte yok.
Sorgulamanın amacı, bu boşluğu ortaya çıkarmak: kağıt üstündeki sayı ile gerçekte elde edilebilecek arasındaki fark.
Geleceğe bakma
En ölümcül soru: her karar anında kullanılan veri, o anda mevcut muydu?
Bilanço verisi yayın tarihinden önce mi kullanılmış? Endeks bileşenleri bugünün listesinden mi alınmış? Bir hissenin geleceği bilinerek mi işlem yapılmış?
Bunların herhangi biri, backtest getirisini yapay olarak şişiriyor. Ve fark edilmesi zor. Bir backtest’in “sadece o ana kadarki veriyle” kurulduğu açıkça söylenmeli.
Hayatta kalma yanlılığı
Veri setinde borsadan çıkmış şirketler var mı?
Yoksa, en kötü sonuçlar veriden silinmiş demektir. Backtest getirisi otomatik olarak şişkin.
Bu, özellikle değer ve ters yön stratejilerini abartıyor, çünkü onların aldığı düşük hisselerin bir kısmı gerçekte battı.
İşlem maliyeti
Getiri brüt mü net mi?
Devir hızı ne? Yüksekse, maliyet büyük bir kesinti. Aylık yüzde 85 devir, gerçekçi maliyetle yıllık getiriden yaklaşık 10 puan götürebiliyor.
Net getiri hesaplanmamışsa, kabaca kendiniz hesaplayın: devir çarpı maliyet çarpı 24.
Likidite
Backtest, istediğiniz miktarı istediğiniz fiyattan alabildiğinizi varsayıyor.
Strateji küçük, illikit hisselere dayanıyorsa, bu varsayım yanlış. Gerçekte o hisseleri o fiyattan alamazsınız; kendi emriniz fiyatı hareket ettirir.
Likidite filtresi uygulandığında performans çöküyorsa, o performans zaten sizin olamayacaktı.
Deneme sayısı
Bu backtest, kaç varyasyon arasından seçildi?
Yüz strateji denenip en iyisi sunuluyorsa, o getiri şişkin. En iyi backtest, şansın da katkısını içeriyor.
Deflated Sharpe, bu deneme sayısını hesaba katıyor. Yoksa, sunulan getiri en iyi denemenin getirisi ve iyimser.
Nominal ve enflasyon
Türkiye’de son soru: yüzde 40 nominal mi reel mi?
Enflasyon yüzde 45 ise, yüzde 40 nominal getiri reel kayıp. Nominal bir backtest getirisi, satın alma gücü artışını göstermiyor.
Sorgulama zinciri
Bir backtest getirisi gördüğünüzde sırayla sorun.
Geleceğe bakma var mı? Her karar, o anki veriyle mi verilmiş?
Delist hisseler dahil mi? (hayatta kalma yanlılığı)
Getiri net mi? Devir ve maliyet ne?
Likidite varsayımı gerçekçi mi?
Kaç varyasyon denenmiş?
Nominal mi reel mi?
Kaç dönemde tutuyor?
Her olumsuz cevap, kağıt üstündeki sayıyı gerçekte elde edilebilecekten uzaklaştırıyor. Bu zincirin sonunda kalan sayı, genelde başlangıçtaki parlak sayının epeyce altında.
Nasıl okumalı
Parlak bir backtest getirisi, bir başlangıç noktası, sonuç değil.
O sayı, en iyi ihtimalle gerçekte elde edeceğinizin üst sınırı. Yukarıdaki sorular, o üst sınırdan gerçeğe inmenizi sağlıyor.
Ve bir strateji bu soruların cevaplarını baştan veriyorsa (net getiri, çok dönem, sınırlar), güven verir. Sadece parlak sayıyı gösterip gerisini gizliyorsa, şüphe uyandırır.
Sıradaki
Sıradaki yazıda grafik yalanlarını ele alıyoruz. Eksen, ölçek ve seçim oyunlarıyla bir grafiğin nasıl yanıltabileceğini göreceğiz.
Bu yazı bilgilendirme amaçlıdır, yatırım tavsiyesi değildir.