Como evitamos o sobreajuste
Um backtest com retornos espetaculares e sem teste fora da amostra diz muito pouco. Estas são as verificações que uma estratégia tem de passar antes de confiarmos nela.
QuantFX2 min de leitura
O problema
Ajustar uma curva a dados passados é fácil. O RSI cruzou os 30 exatamente quando o preço recuperou, e o golden cross apanhou todas as subidas. Um modelo assim memorizou ruído, e o mercado não o vai repetir.
Como validamos
Testes walk-forward
Treinamos com dois anos de dados e testamos nos seis meses seguintes, que o modelo não viu. Depois avançamos a janela e repetimos, em tantos regimes de mercado quanto o histórico permitir.
Entre instrumentos
A mesma lógica é executada em instrumentos relacionados. Se uma estratégia funciona em EURUSD mas falha em GBPUSD e USDJPY, provavelmente está sobreajustada aos dados.
Reamostragem de Monte Carlo
Baralhamos a ordem das operações 10 000 vezes e analisamos a dispersão do drawdown máximo. Se variar mais de 50%, a estratégia é frágil.
Sinais de alerta
Qualquer um destes sinais leva a que uma estratégia volte a ser analisada com mais atenção:
- Um rácio de Sharpe superior a 3 no backtest.
- Nenhum mês com perdas ao longo de cinco ou mais anos.
- Parâmetros afinados com três ou mais casas decimais.
- Resultados num par que não se repetem em pares semelhantes.
- Desempenho que se degrada assim que a estratégia começa a negociar em real.
Como é um resultado sólido
- Desempenho semelhante dentro e fora da amostra.
- Resultados consistentes entre instrumentos.
- Um rácio de Sharpe credível, aproximadamente entre 1,0 e 2,0.
- Lógica simples que conseguimos explicar.
- Resultados que se mantêm quando os parâmetros variam ligeiramente.
Validação em condições reais
Cada nova estratégia negoceia depois durante três meses numa conta de demonstração com preços em tempo real, antes de ser oferecida aos clientes. Se não resistir nessas condições, volta à fase de investigação.