Comment nous évitons le surajustement
Un backtest aux rendements spectaculaires sans test hors échantillon n'apprend pas grand-chose. Voici les vérifications qu'une stratégie doit réussir avant que nous lui fassions confiance.
QuantFX2 min de lecture
Le problème
Ajuster une courbe aux données passées est facile. Le RSI a franchi 30 exactement au moment où le prix a rebondi, et le golden cross a capté chaque hausse. Un tel modèle a mémorisé du bruit, et le marché ne le reproduira pas.
Notre méthode de validation
Tests walk-forward
Nous entraînons le modèle sur deux ans de données et le testons sur les six mois suivants, qu'il n'a jamais vus. Nous décalons ensuite la fenêtre et recommençons, sur autant de régimes de marché que l'historique le permet.
Sur plusieurs instruments
La même logique est exécutée sur des instruments apparentés. Si une stratégie fonctionne sur EURUSD mais échoue sur GBPUSD et USDJPY, elle est probablement surajustée.
Rééchantillonnage Monte Carlo
Nous mélangeons l'ordre des trades 10 000 fois et examinons la dispersion du drawdown maximal. S'il varie de plus de 50 %, la stratégie est fragile.
Signaux d'alerte
Chacun de ces signes vaut à une stratégie un examen plus approfondi :
- Un ratio de Sharpe supérieur à 3 en backtest.
- Aucun mois perdant sur cinq ans ou plus.
- Des paramètres réglés à trois décimales ou plus.
- Des résultats sur une paire qui ne se retrouvent pas sur des paires similaires.
- Des performances qui se dégradent dès le passage en réel.
À quoi ressemble un résultat solide
- Des performances similaires dans l'échantillon et hors échantillon.
- Des résultats cohérents d'un instrument à l'autre.
- Un ratio de Sharpe crédible, d'environ 1,0 à 2,0.
- Une logique simple, que nous savons expliquer.
- Des résultats qui tiennent lorsque les paramètres varient légèrement.
Validation en conditions réelles
Chaque nouvelle stratégie est ensuite exécutée pendant trois mois sur un compte de démonstration avec des prix en temps réel avant d'être proposée aux clients. Si elle ne tient pas dans ces conditions, elle retourne en recherche.