TARGETHIT!

Diğer

Topluluk

Tema

Dil

Algoritmik işlem okulu/Doğrulama/Stres testi: Monte Carlo simülasyonu ve ötesi
Doğrulama11 dk okuma

Stres testi: Monte Carlo simülasyonu ve ötesi

Stratejiniz bir siyah kuğudan sağ çıkabilecek mi?

Stres testi: Monte Carlo simülasyonu ve ötesi

Stratejiniz backtest (geçmiş veride test) aşamasını başarıyla geçiyor. Metrikler binlerce işlemde ve birden fazla walk forward penceresinde iyi görünüyor. Peki bir siyah kuğu olayından sağ çıkabilecek mi?

Backtest'ler size tarih boyunca izlenebilecek olası yollardan yalnızca birini gösterir. Gerçekte olaylar farklı da gelişebilirdi. Monte Carlo simülasyonu ve diğer stres testi teknikleri, olası sonuçların tüm yelpazesini gösterir; sizin geçmiş verinizde yaşanmamış kötü senaryolar da buna dahildir.

Monte Carlo simülasyonu nedir?

Monte Carlo simülasyonu, çok sayıda rastgele simülasyon çalıştırarak belirsizliği anlamaya yarayan bir tekniktir.

Trading'de en yaygın uygulama, işlemlerin sırasını rastgele karıştırmaktır. Backtest'iniz belirli bir sırayla gerçekleşmiş bir işlem dizisi üretti. Ama bu sıralama kısmen rastlantısaldı. Ya kaybeden işlemler farklı biçimde kümelenseydi? Ya en kötü düşüşünüzü (drawdown), hesabınız daha küçükken daha erken yaşasaydınız?

Monte Carlo simülasyonu işlem dizinizi binlerce kez karıştırır ve her karıştırma için metrikleri hesaplar. Tek bir özsermaye eğrisi yerine binlerce olası özsermaye eğrisi elde edersiniz; hepsi sizin kendi işlemlerinizi kullanır, ama farklı sıralarla.

Sonuçların bu dağılımı, yalnızca ne olduğunu değil, neler olabileceğini de gösterir.

İşlem sırasını rastgele karıştırmak

En basit Monte Carlo yaklaşımı, işlem listenizi alır ve rastgele karıştırır. Karıştırılmış diziyi özsermaye eğrisi hesaplama mantığınızdan geçirin. Maksimum düşüşü, son özsermayeyi ve diğer metrikleri kaydedin. Bunu 1,000+ kez tekrarlayın.

Artık elinizde tek bir sayı yerine bir maksimum düşüş dağılımı var. Belki backtest'iniz %18 maksimum düşüş gösterdi, ama Monte Carlo çalıştırmalarının %5'inde düşüş %35'i aştı. Bu da, sahip olduğunuz avantajla (edge) %35'lik bir düşüşün tamamen mümkün olduğunu gösterir.

Bu, pozisyon büyüklüğü belirleme için hayati önemdedir. Pozisyon büyüklüğünüzü %18'lik maksimum düşüşe göre belirleyip fiilen %35'lik bir düşüş yaşarsanız hesabınızı patlatabilirsiniz. Monte Carlo size kuyruk risklerini gösterir.

Buradaki varsayım, işlemlerin birbirinden bağımsız olduğu, yani bir işlemin sonucunun bir sonrakini etkilemediğidir. Pek çok strateji için bu yaklaşık olarak doğrudur. İşlemleri arasında seri korelasyon bulunan stratejiler için daha gelişmiş bir simülasyona ihtiyacınız vardır.

Düşüş olasılık dağılımları

Monte Carlo sonuçları şu gibi soruları yanıtlamanızı sağlar: %30'luk bir düşüşün olasılığı nedir? Peki %40? Ya %50?

Simülasyonlarınızdan elde ettiğiniz maksimum düşüşlerin dağılımını grafiğe dökün. 95. yüzdelik dilimdeki düşüş, makul olarak hazırlıklı olmanız gereken en kötü senaryoyu gösterir. Simülasyonların %95'i -%25'in üzerinde kaldıysa ve yalnızca %5'i bu seviyeyi aştıysa, -%25'i risk planlama eşiğiniz olarak belirleyebilirsiniz.

Bu, tek bir backtest düşüş rakamından çok daha kullanışlıdır. Gerçek işlemlerde, backtest'inizin gösterdiğinden farklı işlem sıralamalarıyla karşılaşacaksınız. Sıralamaların en kötü %5'ine göre plan yapmak akıllıca bir risk yönetimidir.

Düşüş sürelerinin dağılımını da inceleyebilirsiniz. Her simülasyonda önceki zirvenizin ne kadar süre altında kaldınız? Bazı stratejilerin düşüşleri sığdır ama bitmek bilmez; bazılarınınki ise derindir ama hızla toparlanır. Stratejinizin düşüş profilini anlamak, psikolojik olarak hazırlanmanıza yardımcı olur.

Piyasa rejimlerine karşı stres testi

Monte Carlo, mevcut işlemlerinizle neler olabileceğini test eder. Rejim stres testi ise farklı bir soru sorar: Piyasa koşulları değişirse ne olur?

Stratejiniz ağırlıklı olarak boğa piyasalarında ya da ağırlıklı olarak yatay piyasalarda backtest edilmiş olabilir. Backtest döneminizin dışında kalan koşullarda nasıl bir performans gösterir?

Yaklaşımlardan biri, uç özellikler taşıyan tarihsel dönemleri (sert çöküşler, baş döndürücü yükselişler, volatilite sıçramaları) belirleyip stratejinizin tam o dönemlerde nasıl performans gösterdiğine bakmaktır. Backtest döneminiz Mart 2020 tarzı bir çöküşü kapsamıyorsa, stratejinizi o döneme karşı elle test edin.

Bir diğer yaklaşım, uç koşulları yapay olarak oluşturmaktır. Backtest işlemlerinizi alın ve şunu sorun: Her kaybeden işlem %50 daha kötü olsaydı ne olurdu? Kazanan işlemler %30 daha küçük olsaydı? Bu, olumsuz senaryolarda performansınızın sınırlarını çizer.

Bizim rejim testlerimiz BTC rejim filtrelemesine odaklanır. Stratejiler boğa, ayı ve yatay rejimlerde ayrı ayrı değerlendirilir. Yalnızca boğa piyasalarında çalışan bir strateji geçersiz değildir, ama sınırlarını bilmeniz gerekir.

Bir stratejinin fişi ne zaman çekilmeli?

Stres testi, nicel işlemdeki en zor soruyu yanıtlamanıza yardımcı olur: Bir stratejiden ne zaman vazgeçersiniz?

Her stratejinin zararlı dönemleri olur. Asıl soru, bu zararların beklenen parametreler içinde mi kaldığı, yoksa avantajın ortadan kalktığının sinyalini mi verdiğidir.

Monte Carlo simülasyonunuz %30'luk bir düşüş için %5 olasılık gösterdiyse ve siz %30'luk bir düşüş yaşıyorsanız, bu beklentiler dahilindedir. İşlem yapmaya devam edersiniz. Simülasyonların yalnızca %0,1'inin öngördüğü %50'lik bir düşüş yaşıyorsanız, büyük olasılıkla bir şeyler değişmiştir. Strateji çalışmayı bırakmış olabilir.

Herhangi bir stratejiyi devreye almadan önce açık durdurma kriterleri belirleriz. Monte Carlo simülasyonlarının 99. yüzdelik dilimini aşan bir düşüş incelemeyi tetikler. Performansın uzun süre boyunca beklenen sonuçların 10. yüzdelik diliminin altında kalması incelemeyi tetikler. Ardışık kaybeden işlem sayısının beklenen değerden 3 standart sapmadan fazla uzaklaşması incelemeyi tetikler.

Önceden tanımlanmış kriterlere sahip olmak, duyguları karar sürecinin dışında tutar. Bir düşüşün içindeyken panik yapmak ya da umuda sarılmak yerine mevcut performansı beklenen parametrelerle karşılaştırabilirsiniz.

Stres testinin pratikte uygulanması

İşte basitleştirilmiş bir Monte Carlo süreci:

Backtest işlemlerinizi, her işlemin kâr/zararını içeren bir liste olarak dışa aktarın. Bu listeyi rastgele karıştıran, ardından US$ 10,000'dan (ya da başlangıç sermayeniz neyse ondan) başlayarak özsermaye büyümesini simüle eden bir script yazın. Maksimum düşüşü ve son özsermayeyi hesaplayın. Bunu 5,000 kez tekrarlayın. Sonuçların dağılımını grafiğe dökün.

Daha gelişmiş yaklaşımlar arasında bootstrap (iadeli yeniden örnekleme), blok bootstrap (işlemlerdeki kümelenmeyi kısmen koruyan yeniden örnekleme) ve parametrik simülasyon (işlem getirilerini bir dağılım olarak modelleyip bu dağılımdan örnekleme) bulunur.

Rejim testi için işlemlerinizi piyasa koşuluna göre ayırın ve performansı her biri için ayrı ayrı analiz edin. Ardından duyarlılığı görmek için kazanan işlemlerin büyüklüğünü azaltarak ya da kaybeden işlemlerin büyüklüğünü artırarak stres testi yapın.

Temel çıkarımlar

Monte Carlo simülasyonu, yalnızca backtest'inizde olanı değil, olası sonuçların tüm yelpazesini göstermek için işlem sırasını rastgele karıştırır. Düşüş olasılık dağılımları, tekil backtest rakamlarının gizlediği kuyruk risklerini ortaya çıkarır. Backtest düşüşüne göre değil, 95. yüzdelik dilimdeki düşüşe göre plan yapın. Rejim stres testi, ana backtest döneminizin dışındaki koşullarda performansı inceler. Düşüşleri nesnel biçimde değerlendirebilmek için devreye almadan önce açık durdurma kriterleri belirleyin.

Böylece Doğrulama seviyesini tamamladınız. Artık backtest'lerin neden yalan söylediğini, look ahead bias (geleceğe bakma yanlılığı) ile overfitting'in (aşırı uyum) nasıl sahte avantajlar yarattığını, walk forward doğrulamasının gerçeği nasıl ortaya çıkardığını, örneklem büyüklüğünün neden önemli olduğunu, hangi metriklere güvenebileceğinizi ve kuyruk risklerine karşı nasıl stres testi yapacağınızı biliyorsunuz. Sırada Keşif seviyesi var: Burada tüm bu doğrulama filtrelerinden geçen avantajları sistematik olarak nasıl bulacağınızı öğreneceksiniz.