[56] A Causa de um Backtest Lucrativo que Perde ao Vivo

A Verdadeira Causa de um Backtest Lucrativo que Perde na Operação Real

"No backtest o patrimônio havia triplicado, mas quando coloquei para operar de verdade, está no prejuízo" — essa é a frustração mais comum com EAs. Muitos concluem que "o EA quebrou" ou que "o mercado mudou", mas a maior parte das causas está em lacunas estruturais entre o backtest e a operação real.

Existem seis tipos dessas lacunas. Vamos apresentar, uma a uma, a natureza de cada problema e como identificá-lo antes de comprar. Este artigo funciona como um hub para os artigos detalhados de cada tema.

Lacuna 1: A mentira do modelo de ticks

Quando o "modelo" do backtest roda em "OHLC de 1 minuto", surgem execuções em preços que na prática nunca existiram. Estratégias de lucro pequeno, grid e scalping são as mais afetadas: só por isso, o backtest fica positivo e a operação real fica negativa.

Como se proteger: verifique se o modelo é "todos os ticks (baseado em ticks reais)". Se isso não estiver descrito, desconfie. → Detalhes: Por que ticks reais e OHLC geram resultados opostos

Lacuna 2: Spread e execução

O backtest pressupõe uma execução ideal. Na prática, as corretoras têm spread mais largo, execução mais lenta e slippage. Quanto menor a margem de lucro do EA, mais essa diferença consome o resultado.

Como se proteger: desconfie de backtests com spread irrealisticamente estreito. Valide em conta demo na sua própria corretora. → Detalhes: O impacto do spread e do slippage no resultado do EA · Por que trocar de corretora pode fazer você perder

Lacuna 3: Curve fitting (otimização excessiva)

Um EA com parâmetros ajustados em excesso aos dados históricos pode ser perfeito no passado, mas não funciona em um mercado desconhecido. Aquela linda curva ascendente do backtest pode ser apenas o reflexo de um ajuste ao passado.

Como se proteger: verifique se houve validação com divisão in-sample/out-of-sample ou walk-forward. → Detalhes: Como evitar o curve fitting

Lacuna 4: Números inflados pelos juros compostos

Um lucro líquido de "+5.000%" não reflete a real capacidade do EA, é apenas o efeito multiplicador dos juros compostos. Na operação real, um drawdown no meio do caminho faz os juros compostos jogarem contra você, e o resultado não chega nem perto do esperado.

Como se proteger: avalie a capacidade real pelo profit factor, não pelo lucro líquido em %. → Detalhes: A ilusão dos juros compostos e o número que realmente importa

Lacuna 5: Poucas operações, resultado pode ser coincidência

Um EA com PF de 5,5 que fez apenas 28 operações em 8 anos pode simplesmente ter acertado algumas operações grandes por sorte. Na operação real, essa "sorte" não necessariamente se repete.

Como se proteger: confirme se há pelo menos 500 operações e se o período cobre diferentes fases de mercado. → Detalhes: Por que não confiar em backtests com poucas operações

Lacuna 6: Dependência do histórico de mercado (dependência de regime)

Um EA que só funciona no mercado direcional dos últimos anos pode desmoronar no instante em que o caráter do mercado mudar. O bom desempenho do backtest às vezes depende de uma fase específica do mercado.

Como se proteger: analise o resultado ano a ano. Se um único ano concentra todo o lucro e os demais são negativos, desconfie de dependência de regime. → Detalhes: Backtest em massa de 43 EAs de ouro populares com dados reais de 11,5 anos

Resumindo, o processo de verificação tem 4 passos

1. O modelo usa ticks reais? (Lacuna 1)
2. O número de operações é suficiente e cobre diferentes fases de mercado? (Lacunas 5 e 6)
3. A capacidade real está sendo avaliada pelo PF e pelo drawdown efetivo? (Lacunas 3 e 4)
4. Foi feita validação em demo na sua própria corretora? (Lacuna 2)

Um EA que passa por esses 4 pontos tende a ter uma lacuna pequena entre backtest e operação real. Por outro lado, um EA que não divulga essas informações tem alta probabilidade de frustrar as expectativas na operação real.

Confira você mesmo

Nosso EA gratuito (breakout Donchian de barra fechada) é divulgado atendendo a todos os 4 pontos acima: validação com ticks reais, 631 operações, 9,4 anos, divulgação do PF e do drawdown efetivo, e obtenção dinâmica das especificações do ativo. Rode o backtest você mesmo e veja como esses elementos se comportam em um "EA com lacuna pequena".

Detalhes do Donchian Trend Engine (EA gratuito)

Todos os produtos são divulgados com o mesmo critério na página de verificação.

Resumo

• Um backtest lucrativo com prejuízo na operação real não é falha do EA, mas sim seis lacunas estruturais
• Modelo de ticks, spread/execução, curve fitting, juros compostos, número de operações, dependência de regime
• O processo de verificação é: "confirmar ticks reais, número de operações e período, PF e drawdown efetivo, demo na própria corretora"
• EAs que não divulgam essas informações têm alta probabilidade de frustrar na operação real

Artigos relacionados: Diferença entre ticks reais e OHLC · Por que trocar de corretora pode fazer você perder · A ilusão dos juros compostos · Número de operações e confiabilidade do backtest