Paralel geriye dönük test bize ne kazandırıyor
Bir stratejiyi doğrulamak, onu kodlamaktan çok daha uzun sürer ve daha fazla donanımın hızlandırdığı kısım da doğrulamadır.
QuantFX3 dk okuma
Fikirden üretime
Fikirlerin prototipi AWS üzerinde Python ile hazırlanır ve geçmiş tick verileri üzerinde çalıştırılır. Bir fikrin ilerleyip ilerlemeyeceğine ya da araştırmaya geri dönüp dönmeyeceğine sonuçlar karar verir. Saklamaya değer olanlar üretim için C++20 ile yeniden yazılır ve canlı motora yalnızca doğrulanmış bir strateji ulaşır.
Tek fikir, yüzlerce çalıştırma
Tek bir geriye dönük test ucuzdur. Güvenebileceğimiz bir doğrulama ise bunlardan yüzlercesini gerektirir:
- Walk-forward analizi: bir pencerede uyarlama yapılır, bir sonrakinde test edilir ve süreç piyasa rejimleri boyunca ileri kaydırılır.
- Mantığın daha önce hiç görmediği veriler ve enstrümanlar üzerinde örneklem dışı kontroller.
- Sonuçların geniş bir platoda mı yoksa dar bir tepe noktasında mı durduğunu görmek için parametre taramaları.
- Drawdown profilini zorlamak için işlem sırası, maliyetler ve kaymanın Monte Carlo yöntemiyle yeniden örneklenmesi.
Tek bir makinede bu iş, araştırmayı bir kuyruğa dönüştürür.
Her çalıştırma bağımsızdır
Bu çalıştırmaların hiçbiri bir diğerinin sonucuna ihtiyaç duymaz. Her walk-forward penceresi, parametre seti ve Monte Carlo yolu kendi işlem birimine gönderilebilir; böylece iş, işlem birimi sayısıyla neredeyse doğrusal olarak ölçeklenir. Sınırlar, başlangıçta verilerin yüklenmesi ve sonda sonuçların toplanmasıdır.
- 2.000 geriye dönük test × 20 dk
- 40.000 dk
- 1 işlem birimi
- yaklaşık 667 saat, kabaca 28 gün
- 64 işlem birimi
- yaklaşık 625 dk, kabaca 10,4 saat
Gerçek çalışma süreleri strateji karmaşıklığına, veri çözünürlüğüne ve G/Ç'ye bağlıdır.
64 işlem biriminde, akşam başlatılan bir tarama sabaha tamamlanır. Topladığımız tohum yatırım turunun alım satım sermayesini değil, hesaplama gücünü ve donanımı finanse etmesinin nedeni budur. Ayrıntılı dağılım yatırımcı genel bakışında yer almaktadır.
Daha fazla test, kendinizi kandırmanın daha fazla yolu
Hızın bir bedeli vardır. Bir gecede 2.000 varyant çalıştırabiliyorsak, tesadüfen parlak görünen bir tanesini de bulabiliriz. Koruma önlemleri kümeyle birlikte büyümek zorundadır:
- Son bir ayrılmış (hold-out) dönem geliştirme süresince kilitli kalır ve yalnızca bir kez kullanılır.
- Denenen varyant sayısı arttıkça çıta yükselir. Kaç yapılandırmanın test edildiğini kaydeder ve kazananı bu sayıya göre değerlendiririz.
- Bir strateji, art arda gelen çok sayıda walk-forward penceresinde ayakta kalmalıdır. Tek bir iyi bölme çok az şey kanıtlar.
- En yüksek skoru veren tek bir ayar yerine tutarlı performans gösteren parametre bölgelerini tercih ederiz.
Küme sayesinde her aday, kontrollerin tamamından geçer.
Müşterilerin bundan kazancı
Şirketler motorumuzu kendi markalarıyla çalıştırır ya da stratejileri kendileri için geliştirip işletmemizi ister. Daha hızlı bir döngü, strateji talebi ile doğrulanmış bir aday arasındaki bekleme süresinin kısalması demektir. Yeni veriler üzerinde yeniden doğrulama rutin bir iş hâline gelir ve yürütme mantığındaki değişiklikler üretime ulaşmadan önce tüm geçmiş üzerinde test edilir.
Motorun kendisi teknoloji sayfasında anlatılmaktadır.