Trop peu de trades fausse le backtest

Pourquoi il ne faut pas se fier à un backtest reposant sur trop peu de trades

Quand on regarde le backtest d'un EA, le premier réflexe est souvent de regarder le profit factor ou le rendement annuel. Mais ce qui détermine si l'on peut faire confiance à ces chiffres, c'est le nombre de trades. S'il est trop faible, même le profit factor le plus spectaculaire peut n'être que le fruit du hasard.

Un PF de 5,56 sur seulement 28 trades : peut-être juste de la chance

Prenons un exemple concret. Un EA de tendance sur Bitcoin en D1 (journalier), validé sur 8 ans en ticks réels, affichait les chiffres suivants :

• Profit factor : 5,56
• Drawdown maximal : seulement 3,2 %
• Nombre de trades : 28

Un PF de 5,56 est un chiffre impressionnant, et beaucoup se laisseraient séduire immédiatement. Mais dès qu'on voit que ces résultats reposent sur seulement 28 trades en 8 ans, l'évaluation change du tout au tout. Avec 3 à 4 trades par an, il suffit de quelques gros gains isolés pour faire paraître l'ensemble spectaculaire. Et si 3 de ces 28 trades n'étaient que des coups de chance ? En les retirant, l'edge pourrait tout simplement disparaître.

À l'inverse, un EA de tendance sur USDJPY affichait, sur 9,4 ans, 631 trades, un profit factor de 1,50 et un taux de réussite de 34,5 %. Le PF paraît modeste, mais 631 trades suggèrent fortement que ce 1,50 n'est pas dû au hasard. Même en retirant quelques trades sur les 631, le résultat global change à peine.

Pourquoi le nombre de trades compte autant : l'exemple du pile ou face

Si on lance une pièce trois fois et qu'elle tombe trois fois sur pile, peut-on en conclure que cette pièce favorise le pile ? Non. Trois piles d'affilée arrivent une fois sur huit, même avec une pièce parfaitement équilibrée.

Le même phénomène s'observe avec les EA. Avec trop peu de trades, il est impossible de distinguer un simple coup de chance sur une bonne configuration de marché d'un véritable edge. Plus le nombre de trades augmente, moins le hasard peut expliquer le résultat, et plus la probabilité que le chiffre soit authentique augmente. En statistiques, on appelle cela la « taille de l'échantillon ».

Quel repère suivre : à partir de combien de trades peut-on faire confiance ?

Il n'existe pas de seuil strict, mais voici des repères pratiques :

Plus important encore : il faut croiser ce chiffre avec la période de test. Si 500 trades sont concentrés sur une seule année, cela ne couvre qu'une seule phase de marché. On ne peut vraiment parler de robustesse que lorsque ces 500 trades et plus s'étendent sur plusieurs régimes de marché : crise de Lehman, COVID, phases de hausse des taux, etc.

Les astuces pour masquer un nombre de trades trop faible

Les pages de vente utilisent plusieurs techniques pour dissimuler un nombre de trades insuffisant :

• Gonfler le gain net grâce aux intérêts composés : des chiffres comme « +5 000 % » proviennent de l'effet multiplicateur des intérêts composés, pas du nombre de trades. Même avec peu d'opérations, le gain net peut sembler colossal.
• Ne mettre en avant que le profit factor : comme avec un PF de 5,56 sur 28 trades, on affiche le PF seul, sans jamais préciser le nombre de trades.
• N'afficher que le rendement annuel : c'est un moyen pratique de masquer le nombre de trades.

C'est pourquoi, face à un backtest, il faut toujours chercher le nombre de trades. Si cette information n'apparaît nulle part, c'est en soi un signal d'alerte.

Vérifiez par vous-même

Notre EA gratuit (breakout Donchian sur bougies clôturées) est en code source ouvert, validé en ticks réels, avec 631 trades effectifs sur USDJPY en H1. En lançant vous-même le backtest, vous pourrez vérifier de vos propres yeux le nombre de trades, le profit factor et les résultats année par année. C'est un exemple concret de ce à quoi ressemble, statistiquement, un EA « avec un grand nombre de trades traversant plusieurs configurations de marché ».

Découvrir le Donchian Trend Engine (EA gratuit)

Nos produits payants suivent le même principe de transparence : nous publions pour tous nos produits le nombre de trades, la période de validation et les données réelles. Un produit dont le backtest ne comporte que quelques dizaines de trades ne figure jamais parmi nos références principales, même avec un PF élevé.

En résumé

• La fiabilité d'un backtest dépend avant tout du nombre de trades (la taille de l'échantillon)
• Un PF de 1,50 sur 631 trades est plus fiable qu'un PF de 5,56 sur seulement 28 trades
• Comme repère : viser 500 trades ou plus, répartis sur plusieurs régimes de marché
• Les intérêts composés, le profit factor isolé et le rendement annuel seul servent souvent à masquer un nombre de trades insuffisant
• Méfiez-vous de tout backtest qui ne précise pas le nombre de trades

Articles liés : Comment lire un rapport de backtest MT5 · Pourquoi le même EA donne des résultats opposés en ticks réels et en OHLC · Comment repérer le curve fitting