Backtesting Tuzakları ve Walk-Forward Test
Geleceğe bakma sızıntısı, hayatta kalma yanlılığı, örneklem içi Sharpe aşırı uyumu, sıfır tamponlu dönüşler ve kayma hataları testleri nasıl bozar?
Nicel bir strateji testi pürüzsüz eğimli bir getiri eğrisi, 3.2 Sharpe Oranı ve neredeyse sıfır düşüş gösteriyorsa ilk varsayım her zaman zaman damgası mantığında gizli bir hata olmasıdır.
Gerçek piyasa sinyalleri gürültülüdür, ters zamanlarda ortalamaya döner ve alış-satış makasına karşı hassastır. Backtesting (Geçmiş Veri Testi) Denetimi bölümünde yer alan 6 aylık ve 2 yıllık testler gibi dürüst bir değerlendirme düzeneği kurmak, vasat stratejileri kağıt üzerinde sahte kazanana çeviren mühendislik sızıntılarını tek tek ayıklamak anlamına gelir.
1. Geleceğe Bakma (Lookahead) Hatası ve Zaman Hizalaması
Geleceğe bakma hatası nadiren açıkça df['future_close'] okumak biçiminde karşınıza çıkar. Çoğunlukla sıradan veri hattı kısayollarından sızar:
- Tüm seri üzerinde normalizasyon: Fiyatları veya öznitelikleri
StandardScaler().fit(full_history)ile ölçeklemek gelecekteki ortalama ve varyansı geçmiş çubuklara taşır. Her normalizasyon penceresi yalnızca geçmişe bakmalı ya da her kayan walk-forward katmanının içinde yeniden hesaplanmalıdır. - Seans sonrası bildirimlerin işlem gününe yazılması: Bir SEC Form 10-Q veya bilanço açıklaması Salı günü
16:30 ETsaatinde düştüyse, o duygu skorunu Salı gününün satırına bağlamak simülatörün kimsenin otuz dakika daha okuyamayacağı haberle Salı16:00 ETkapanışından işlem açmasına yol açar. - Bölünme ve temettü düzeltmeleri: 4’e 1 hisse bölünmesinin
-75%çöküş gibi görünmemesi için geçmiş fiyatları düzeltmek şarttır; fakat sürümü takip edilmeyen düzeltme katsayıları zaman damgası sınırlarındaki eşik kesişmelerini sessizce kaydırabilir.
Sıkı walk-forward doğrulamada t anındaki her öznitelik vektörü yalnızca t öncesinde kesinleşmiş çubukları okuyabilir ve simülasyon emirleri sinyal üretildikten sonraki ilk işlem penceresinde gerçekleşir.
2. Hisse Evrenlerinde Hayatta Kalma (Survivorship) Yanlılığı
Bugünün en büyük 500 veya 1.000 ABD hissesini çekip bu sabit liste üzerinde 2 ya da 5 yıllık simülasyon koşturmak, hayatta kalma yanlılığını doğrudan kazanma oranının içine gömer.
İflas eden, borsa kotundan çıkarılan veya diplerde düşük fiyattan devralınan şirketler güncel aktif listelerde görünmez. Geriye yalnızca 2026 yılına ulaşabilmiş olanlar kalır. Doğal olarak bugüne sağ çıkan hisselerde düşüşten alım kuralları çalıştırmak parlak toparlanma istatistikleri üretir; çünkü -%40 kırılımı -%98 kayba giden her şirket döngü başlamadan sessizce listeden çıkarılmıştır.
Bir uygulama son 24 aylık dönemde aktif listeyi denetliyorsa dürüst adım ölçtüğü şeyi açıkça söylemektir: sabit kuralların seçili aktif ve likit hisselerde o geriye dönük pencerede nasıl davrandığını, birebir aynı tarihlerde pasif Al ve Tut (Buy & Hold) ölçütüyle yan yana koyarak göstermek. Sabit evrenli koşullu bir denetimi hiçbir zaman yanlılıktan arındırılmış fon geçmişi gibi okumamak gerekir.
3. Örneklem İçi Sharpe Oranını Aşırı Uyumlandırma
Tek bir tarihsel pencere üzerinde yeterince serbest parametre verdiğinizde optimizasyon döngüsü rastgele gürültüyü ezberler.
SMA 20 > EMA 50 kesişimi, RSI < 35 ve Haber Duygu Skoru > -0.25 koşullarıyla girip %2,5 zarar kes ya da %7,5 kâr al ile çıkan bir kural düşünün. Eğer tüm veri seti boyunca RSI sınırını 20’den 45’e, stop oranını %1,0’dan %6,0’a, hedefi %3,0’dan %15,0’a tarayan bir ızgara araması çalıştırırsanız en üstteki satır neredeyse her zaman üç dört uç makro harekete şans eseri denk gelmiştir.
Walk-forward bölmeleri bu kırılganlığı çabuk yakalar:
Katman 1: Eğitim [Ay 01..12] -> Parametre dondur -> Test [Ay 13..15]
Katman 2: Eğitim [Ay 01..15] -> Parametre dondur -> Test [Ay 16..18]
Katman 3: Eğitim [Ay 01..18] -> Parametre dondur -> Test [Ay 19..24]
Bir hisse stratejisi örneklem içinde 2.1 Sharpe Oranı üretip ileriye dönük dış katmanlarda 0.3 düzeyine çakılıyorsa veya oynaklık arttığında pasif Al-Tut getirisinin gerisinde kalıyorsa ayarlanmış parametreler kırılgandır. Tüm hisselerde ortak, yorumlanabilir sabit risk sınırları (%2,5 zarar kes, %7,5 kâr hedefi, sabit kesişim mantığı) tutmak, hisse bazlı eğri uydurmaya kıyasla parametre aşırı uyumunu ciddi ölçüde düşürür.
4. Histerezis Çıkış Tamponları ve Ham Eşik Dönüşleri
Sürekli bir skoru hiçbir tampon olmadan doğrudan AL, TUT ve SAT kutularına bölmek sınır çizgisinde yıkıcı testere işlemleri doğurur.
skor >= 0.30 -> AL ve skor < 0.30 -> SAT kuralı koyduğunuzu varsayın. Hisse adil değer yakınında yatay seyrederken gün içi skoru dört tarama boyunca 0.31 -> 0.28 -> 0.32 -> 0.29 oynadığında sıfır tamponlu kural iki günde dört tur işlem tetikler. Sıfır komisyonlu simülasyonda bu gürültü eğriyi fazla bozmaz; gerçek makas maliyeti eklendiğinde ise strateji sürtünmeden erir.
Temiz bir Histerezis (Sinyal Kararlılık Tamponu), giriş eşiğiyle çıkış geçersizliğini birbirinden ayırır:
- Giriş eşiği net pay ister:
ALsinyali yalnızca trend hizalaması, gün içi azalan güç (>= 0.30) ve hedef mesafesi belirlenen eşikleri geçtiğinde tetiklenir. - Nötr bekleme koridoru (
TUT): Fiyat hedefine yaklaşıp kalan[TT]potansiyeli sıfıra doğru daraldığında sistem doğrudanSATyerineTUTdurumuna çekilir. - Ayrı çıkış geçersizliği: Pozisyon ancak açık bir yapısal kırılımda (
SMA 20 < EMA 50), aşırı alım yorgunluğunda (RSI > 70),%2,5stop vuruşunda veya%7,5hedef gerçekleşmesinde kapanır.
Giriş ve çıkış eşiklerini ayırmak bilinçli bir ölü bant bırakarak sıradan fiyat titremelerinin sahte dönüş sinyali basmasını önler.
5. Paper Portfolio Muhasebesi ve Gerçek Aracı Kurum Kayması
Temiz bir walk-forward testi bile gerçek aracı kurum üzerinden piyasa emri göndermekten dört somut sürtünmeyle ayrılır:
- Boşluk atlayan stop seviyeleri: Simülasyondaki
%2,5zarar kes emri tam-%2,5noktasında kapanır. Gerçek piyasada bilanço sonrası gece açılışı dünkü kapanışın%11altında gerçekleştiğinde piyasa stop emriniz-%11seviyesinden dolar. - Alış-satış makası ve emir defteri derinliği: Orta ölçekli veya düşük hacimli hisselerde (
Ortalama Hacim < 100K) açılış müzayedesi (09:30 ET) ve öğle durgunluğunda makas açılır; makası iki kez geçmek fiyat daha hareket etmeden%0,20–%0,80götürür. - Kısmi dolumlar ve gecikme: Planlı taramanın sinyali yayımladığı an ile emrin borsaya ulaştığı saniye arasında momentumlu kırılımlar birkaç kademe yukarı kayabilir.
- Takas, ödünç maliyeti ve vergi: Nakit bekleme süresi,
T+1takas kuralları, açığa satışta bulunması zor hisse maliyetleri ve kısa vadeli sermaye kazancı vergisi brüt strateji kartlarında yer almaz.
Paper Portfolio (Sanal Portföy) simülasyonunun gerçek aracı kurum bağlantısından tamamen ayrı tutulup yerel SQLite içinde çalışmasının nedeni budur. Sanal defterler ve geriye dönük denetimler gerçek dolarları riske atmadan önce bir sinyal çerçevesinin istatistiksel olarak tutarlı olup olmadığını sınamanıza yarar; sürtünmesiz kazanç vaadi değildir.