Çerçeve
Her sayısal iddia için, sırayla dört katman.
Birinci katman: gerçek mi? Bu etki var mı, yoksa tesadüf mü? İstatistiksel anlamlılık, örneklem büyüklüğü, kaç deneme yapıldığı.
İkinci katman: ne kadar büyük? Gerçekse bile, umursayacağım kadar büyük mü? Etki büyüklüğü, portföy karşılığı, ekonomik anlamlılık.
Üçüncü katman: bana uygulanabilir mi? Gerçek ve büyükse bile, ben elde edebilir miyim? İşlem maliyeti, likidite, vergi, enflasyon, kendi piyasam.
Dördüncü katman: sürdürülebilir mi? Bugün işe yarıyorsa bile, yarın da yarayacak mı? Yayın sonrası zayıflama, rejim değişimi, arbitrajın kapatması.
Bir iddia bu dört katmanı da geçiyorsa, ciddiye alınmaya değer. Çoğu iddia, ilk katmanda takılıyor.
Tekrarlanan temalar
Yüz yazı boyunca birkaç fikir defalarca döndü. Bunlar çerçevenin özü.
Gürültü sinyalden çok. Finansta sinyal zayıf. Bu tek gerçek, neredeyse bütün zorlukların kaynağı. Küçük etkileri gürültüden ayırmak çok veri, çok dikkat gerektiriyor.
Kaç deneme yapıldığını bilmeden hiçbir sonuç değerlendirilemez. Çoklu test, borsadaki ve akademideki en yaygın hata. Bir bulgunun kaç alternatif arasından çıktığı, ona ne kadar güveneceğinizi belirliyor.
Zamanı doğru kullanmak her şeyi belirliyor. Geleceğe bakan bir sonuç, ne kadar güzel görünürse görünsün geçersiz.
Basit, karmaşıktan dayanıklı. Az veri, zayıf sinyal ortamında karmaşık modeller gürültüye uyuyor. Basitlik bir savunma.
En güçlü kanıt tekrarlamadır. Tek bir çalışma, tek bir düşük p-değeri zayıf. Bağımsız olarak, farklı verilerde tekrarlanan bulgular güçlü.
Sorulacak evrensel sorular
Hangi sayısal iddia olursa olsun, birkaç soru her zaman işe yarıyor.
Kim söylüyor, ne çıkarı var?
Örneklem ne, kaç bağımsız gözlem?
Kaç alternatif denenmiş?
Neye göre karşılaştırılıyor?
Ne söylenmiyor, hangi bilgi eksik?
Bu başka yerde de tutuyor mu?
Bu sorular, akademik bir makale için de, bir strateji sunumu için de, bir haber istatistiği için de aynı.
Alçakgönüllülük bir yöntem
Bu serinin belki en önemli mesajı, teknik değil.
Ne kadar çok ölçerseniz, ne kadar az bildiğinizi o kadar iyi görüyorsunuz. Ve bu farkındalık, bir zayıflık değil, en güçlü koruma.
Sayılar size kesinlik vermiyor. Belirsizliğin boyutunu veriyor. Kesin cevap veren yaklaşımlar, belirsizliği ölçmüyor, sadece gizliyor.
İyi bir analiz “bu olacak” demiyor. “Bunlar olabilir, şu daha olası, en kötüsü şu kadar” diyor. Bu, kesin cevap veren her yaklaşımdan daha faydalı.
Kendimize de uyguladığımız
Bu çerçeveyi kendi çalışmalarımıza da uyguluyoruz.
Bulgularımızın sınırlarını yazıyoruz. Tutmayan fikirleri paylaşıyoruz. Sonuçlarımızın hayatta kalma yanlılığı içerdiğini, nominal olduğunu, işlem maliyeti içermediğini belirtiyoruz. Sayılarımızın teyit edilmesi gereken noktalarını işaretliyoruz.
Bunlar zayıflık değil. Bir sonucun ne kadarının gerçek olduğunu okuyucunun tartabilmesi için gereken bilgi.
Ve iyi bir okuyucu, bize de aynı soruları sorar. Sormalı.
Son söz
Bu seri, size hangi hisseyi alacağınızı söylemedi. Söyleyemez.
Söylediği şey, karşınıza çıkan sayısal iddiaları nasıl süzeceğiniz. Hangilerine ne kadar güveneceğiniz. Nerede kandırıldığınızı, nerede kendinizi kandırdığınızı nasıl fark edeceğiniz.
Bu, hisse seçmekten daha değerli bir beceri. Çünkü ömür boyu, sayısal iddialarla dolu bir dünyada karar vereceksiniz. Onları doğru okumak, hangi tek kararı verdiğinizden daha çok fark yaratıyor.
En faydalısı, öğrendiklerinizi kendi verinizde denemek. Bir iddiayı alıp bu çerçeveden geçirmek. Okumaktan öğrenilenin birkaç katını, tek bir uygulamadan öğreniyorsunuz.
Bu yazı bilgilendirme amaçlıdır, yatırım tavsiyesi değildir.