Backtest não serve para provar que uma estratégia funciona. Serve para tentar provar que ela não funciona.
Esse é justamente o erro de muita gente. Testa dezenas de parâmetros, muda janela, filtro, ativo, período, regra de saída, até encontrar uma curva bonita e depois chama aquilo de evidência. Não encontrou uma estratégia. Encontrou uma combinação que sobreviveu ao processo de procura.
E nem as metodologias criadas para evitar overfitting são imunes a isso. Walk-forward, por exemplo, pode virar simplesmente overfitting sequencial. Você otimiza, testa fora da amostra, olha o resultado, altera o modelo, roda novamente e repete o processo. Depois de algumas rodadas, aquele “out of sample” já participou indiretamente da construção da estratégia.
Ainda entram vazamento de informação, survivorship bias, custos irreais, slippage ignorado, múltiplos testes, seleção de período, mudanças de regime e dezenas de outras formas de fabricar uma vantagem estatística que nunca existiu.
O problema...
Suggested Credits
Tags, Events, and Projects