Mesmo número de trades, confiança diferente: independência

Conclusão: recontar o número de trades como "número de tentativas independentes"

Quanto mais trades houver no backtest, mais confiável tende a ser o resultado. Mas isso só vale quando cada operação é independente das demais. Em EAs que abrem várias posições ao mesmo tempo, na mesma direção, ou em EAs de vários ativos que reagem ao mesmo movimento de mercado, a amostra efetiva pode ser bem menor do que o número de trades do relatório.

Ao avaliar um EA, nós também olhamos primeiro para "quantas decisões independentes houve" e só depois para "quantas operações foram feitas". Neste artigo, reunimos essa forma de pensar e o passo a passo para conferir.

Por que a correlação reduz a amostra

Você pode estar contando a mesma decisão 5 vezes

Imagine um EA que, a cada sinal, abre 5 posições ao mesmo tempo, e as 5 são encerradas com o mesmo movimento de preço. O relatório mostra 100 trades, mas foram apenas 20 decisões tomadas sobre o mercado. Lançar uma moeda 100 vezes é muito diferente de lançá-la 20 vezes e copiar cada resultado 5 vezes: o grau em que o acaso é afastado não tem comparação.

Em estatística, considera-se que a amostra efetiva diminui conforme aumenta a correlação entre os trades. Num modelo simples, sendo n o número de trades e ρ a correlação média entre eles, a amostra efetiva é aproximadamente n ÷ (1 + (n − 1) × ρ). Com ρ igual a 0, a amostra efetiva é o próprio número de trades, mas basta ρ ficar um pouco positivo para ela cair bastante. A correlação real nunca é perfeitamente constante, então use a fórmula apenas como referência para ter uma noção da ordem de grandeza.

"EAs diferentes" também não são necessariamente independentes

O problema não se limita a um único EA. Por exemplo, o MEGAMAX DONCHIAN e o DONCHIAN ENGINE, ambos nossos, foram testados em USDJPY H1 e no mesmo período (2017.01.01 - 2026.06.01), com 629 e 631 trades e tempo médio de permanência de 32:58:21 e 32:42:37, respectivamente. Com números tão próximos, é natural supor que o timing das operações se sobreponha bastante (não comparamos trade a trade, então não dá para afirmar o quanto coincidem). Rodar os dois ao mesmo tempo não significa uma diversificação respaldada por 1.260 trades independentes; convém partir dessa premissa.

Principais padrões que comprometem a independência

Em carteiras multiativos como o ATLAS, a própria combinação de ativos define a qualidade da diversificação. Dos 1193 trades do backtest, quantos vêm de momentos de baixa correlação? Isso não dá para saber olhando apenas o número de trades.

Passo a passo para verificar

1. Exporte o histórico de execuções em CSV. É possível exportar pela aba "Execuções" do relatório de backtest do MT5.
2. Agrupe pelo horário de entrada. Trades que entraram na mesma barra (no H1, a mesma hora) e na mesma direção formam um grupo. O número de grupos é uma referência do "número de decisões independentes".
3. Verifique a sobreposição do tempo de permanência. Se o tempo médio de permanência de um EA for maior que o intervalo entre trades, ele pode estar sempre com várias posições abertas.
4. Recontar pelo resultado diário. Em vez de usar o trade como unidade, use o "resultado do dia" como uma amostra e recalcule taxa de acerto e PF. Isso elimina boa parte do inchaço causado por posições simultâneas.
5. Compare os EAs que serão usados juntos. Alinhe o resultado diário dos 2 e confira se eles ganham e perdem nos mesmos dias.

Também reunimos o básico sobre validação em Conhecimento sobre EA e MT5.

Limitações e cuidados

Tudo isso também tem limites.

• A correlação não é constante. Mesmo ativos normalmente pouco correlacionados tendem a se mover juntos na mesma direção em movimentos bruscos. Dados de períodos calmos podem parecer "independentes", e essa premissa pode ruir justamente quando mais se precisa dela.
• Agrupar por dia também faz perder informação. Você se aproxima da independência, mas a amostra fica menor, o que dificulta a avaliação de outra forma. Não existe resposta definitiva sobre qual é a unidade correta de agrupamento.
• Também não recontamos todos os nossos EAs. O resultado de aplicar este procedimento a todos os EAs ainda não está em condições de ser divulgado. O número de trades exibido é a quantidade de execuções no relatório.
• Confirmar a independência não garante lucro. Você só obtém uma referência de quanto o desempenho poderia ser explicado pelo acaso, não o desempenho futuro.

Resumo

• Mesmo com o mesmo número de trades, se houver correlação entre eles, a confiança estatística diminui
• Posições simultâneas, sobreposição do tempo de permanência, ativos muito correlacionados e uso conjunto de EAs com lógica parecida reduzem a amostra efetiva
• Agrupar por horário de entrada ou recontar pelo resultado diário ajuda a estimar o "número de decisões independentes"
• Mesmo parecendo independentes em períodos calmos, as correlações podem aumentar em movimentos bruscos
• Ao combinar vários EAs, decida pela sobreposição do timing das operações, não pelo ativo ou pelo nome