Votre backtest est superbe. Sur un marché.
La courbe monte bien droit, le drawdown reste sage, les chiffres donnent envie. Et pourtant, une question revient : est-ce un vrai avantage, ou juste de la chance sur ce marché précis ?
C'est le doute le plus difficile à trancher en trading. Vous avez peut-être trouvé quelque chose de réel. Ou vous avez réglé vos paramètres jusqu'à épouser le hasard d'une seule série de prix.
Dans cet article, vous allez voir un test simple, que presque personne ne fait, pour séparer les deux. L'idée tient en une phrase : un vrai avantage laisse une trace sur d'autres marchés, un hasard non. Vous verrez aussi comment le mener intelligemment, parce que relancer sa stratégie n'importe où ne prouve rien.
Un seul marché, c'est un seul échantillon
Quand vous optimisez une stratégie sur l'EUR/USD, vous ne testez pas une idée dans l'absolu. Vous l'ajustez à l'histoire d'un seul instrument, sur une seule période.
Le problème, c'est qu'un marché contient beaucoup de bruit. Des mouvements qui ne se répètent pas, des accidents, des coïncidences. Plus vous ajoutez de règles et de réglages, plus vous risquez de coller à ce bruit au lieu de capturer un vrai signal.
Cette dérive porte un nom : le sur-ajustement. Votre stratégie apprend l'histoire par cœur au lieu d'apprendre une logique.
Et le piège se referme encore plus vite si vous avez essayé beaucoup de variantes avant de garder la meilleure. Tester cinquante idées et conserver celle qui brille, c'est presque garantir de tomber sur une fausse gagnante. C'est le mécanisme du data mining : avec assez d'essais, le hasard finit toujours par produire une belle courbe.
Sur un seul marché, une performance magnifique ne prouve donc rien. Elle est compatible avec un vrai avantage comme avec une pure illusion.
Il vous faut un moyen de distinguer les deux. Et ce moyen, c'est de sortir de ce marché unique.
Un vrai avantage voyage, le hasard reste sur place
Voici l'intuition centrale.
Si votre stratégie exploite un comportement réel du marché, une inefficience qui a une raison d'exister, alors ce comportement ne se limite probablement pas à un seul instrument. Il devrait laisser une trace ailleurs, sur d'autres marchés soumis à la même logique.
À l'inverse, si votre belle courbe vient d'un ajustement au hasard, ce hasard est propre à ce marché. Il ne se reproduira pas sur un autre. Le nouveau marché n'a jamais vu vos réglages, il n'a aucune raison de les flatter.
Cette idée n'a rien d'exotique. Elle est au cœur du travail des références du trading systématique.
Robert Carver, ancien gérant de fonds quantitatif, défend une thèse simple dans son livre Systematic Trading : la diversification entre instruments compte bien plus que la diversification entre règles. Une même logique appliquée à plusieurs marchés est plus robuste qu'un empilement de règles sur un seul.
Ernest Chan, dans Algorithmic Trading, recommande de tester une stratégie sur plusieurs instruments qui partagent la même cause économique, précisément pour vérifier que l'effet est structurel et pas accidentel.
Et Perry Kaufman, dans son manuel de référence, le dit sans détour : pour une stratégie conçue sur un indice comme le S&P 500, les autres grands indices servent très bien de données hors-échantillon.
Autrement dit, un autre marché est un juge que vous n'avez pas pu corrompre.
Ne relancez pas au hasard : raisonnez par comportement de marché
Attention : ce test ne consiste pas à lancer votre stratégie sur le premier marché venu.
Une stratégie a une personnalité. Certaines gagnent quand le prix revient vers une moyenne après un excès. On parle de retour à la moyenne. D'autres gagnent quand un mouvement se prolonge, quand la tendance en cours attire encore plus d'acheteurs ou de vendeurs. On parle de suivi de tendance, ou momentum.
Les marchés aussi ont une personnalité. Certains ont tendance à osciller autour d'un niveau, d'autres à prolonger leurs mouvements. Cette personnalité dépend du marché et de l'horizon de temps, donc elle se vérifie plutôt qu'elle ne se suppose.
De là, deux façons intelligentes d'utiliser le test.
La première, c'est confirmer votre avantage sur un marché de la même famille. Vous avez une stratégie de retour à la moyenne qui marche sur un indice ? Relancez-la sur un autre marché lui aussi enclin au retour à la moyenne. Si elle tient, c'est un bon signe : l'avantage n'était pas propre à un seul instrument.
La seconde, c'est sonder les limites en changeant de terrain. Vous avez une stratégie momentum efficace sur les indices, qui prolongent souvent leurs tendances ? Lancez-la sur le Forex, où les grandes paires ont plutôt tendance à osciller. Ici, vous ne cherchez pas forcément à ce que ça marche. Vous cherchez à savoir si l'avantage survit hors de son terrain naturel, ou s'il s'effondre dès que le décor change.
Le bon réflexe n'est pas « est-ce que ça marche partout », mais « est-ce que ça se comporte comme une vraie logique quand je change de marché ».
Ce qui n'a aucun sens, en revanche, c'est de tester une stratégie de retour à la moyenne calibrée sur un indice directement sur un marché de l'énergie au comportement totalement différent, puis de conclure quoi que ce soit d'un échec. Vous ne testez plus la robustesse, vous comparez deux mondes.
Le test en pratique, étape par étape
Concrètement, la démarche tient en trois précautions.
D'abord, choisissez le bon marché de comparaison. Un marché de la même famille de comportement pour confirmer, ou un marché opposé pour éprouver les limites. Le tout en respectant la logique de votre stratégie, pas en piochant au hasard.
Ensuite, gardez exactement les mêmes règles et les mêmes paramètres. C'est le point le plus important. Si vous ré-optimisez vos réglages sur le nouveau marché, vous ne testez plus rien : vous recommencez à ajuster au hasard, sur une nouvelle série. Le test perd tout son sens. Les paramètres doivent rester figés.
Enfin, comparez avec intelligence. Ne cherchez pas la même performance au centième près. Perry Kaufman formule la nuance mieux que personne : inquiétez-vous quand des marchés similaires donnent des résultats très différents, mais attendez-vous à ce que des marchés différents aient leurs propres caractéristiques.
Ce que vous voulez voir, ce n'est pas un chiffre identique. C'est un avantage qui survit. Une stratégie qui reste du bon côté, même avec une performance plus modeste, sur un marché qu'elle n'a jamais rencontré, vous dit quelque chose de précieux. Une stratégie qui s'effondre instantanément sur un marché pourtant proche vous dit l'inverse.
Et surtout, ne bricolez pas pour sauver un test raté. Si la stratégie casse sur un marché de la même famille, ce n'est pas un détail à corriger. C'est le signal que vous cherchiez.
Ce que ce test ne remplace pas
Soyons clairs sur son rôle. Ce test multi-marchés est un filtre anti-hasard, pas une preuve de rentabilité.
Il répond à une question précise : « est-ce que mon avantage ressemble à une vraie logique ou à une coïncidence ? » Il ne répond pas à « est-ce que je vais gagner de l'argent en réel ».
Il ne remplace donc pas la validation dans le temps. Une stratégie doit aussi prouver qu'elle tient sur des périodes qu'elle n'a pas servi à se construire. C'est le rôle du walk-forward analysis, qui teste vos réglages sur des tranches de temps successives et jamais vues. Les deux tests sont complémentaires : l'un explore l'espace des marchés, l'autre explore le temps.
Gardez aussi en tête une limite honnête. Un avantage réel peut se dégrader. Une logique qui marchait sur plusieurs marchés peut cesser de fonctionner quand trop de monde l'exploite ou quand le régime de marché change. Passer ce test augmente votre confiance, il ne vous délivre aucune garantie. Les performances passées ne préjugent jamais des performances futures.
Les quatre pièges à éviter
Ce test est simple, mais facile à saboter. Quatre erreurs reviennent souvent.
Voici celles à surveiller :
- Ré-optimiser sur le nouveau marché. C'est l'erreur qui vide le test de son sens. Dès que vous re-réglez, vous ne validez plus, vous sur-ajustez à nouveau.
- Garder « le marché qui marche ». Tester sa stratégie sur vingt instruments et ne conserver que ceux où elle brille, c'est de la sélection déguisée. Kevin Davey raconte dans son livre Building Winning Algorithmic Trading Systems que ce fut l'une de ses grosses erreurs de débutant : choisir le marché sur la performance, un « non » catégorique.
- Tester sur des marchés trop corrélés. Valider une stratégie du DAX sur le S&P 500 n'est pas un vrai test indépendant : ces indices bougent souvent ensemble. Deux marchés qui font le même pari ne vous apprennent presque rien de plus qu'un seul. C'est toute la question du risque de positions corrélées.
- Ignorer les différences structurelles. Chaque marché a ses coûts, ses spreads, ses horaires. Un résultat plus faible ailleurs vient parfois d'un environnement plus cher, pas d'un avantage absent. Comparez en tenant compte de ces frictions.
Éviter ces quatre pièges, c'est déjà transformer un test bâclé en vrai contrôle de robustesse.
FAQ
Comment savoir si ma stratégie de trading est robuste ?
Une stratégie robuste garde un avantage quand les conditions changent. Deux contrôles complémentaires le vérifient : la tester sur un marché qu'elle n'a jamais vu, en gardant les mêmes paramètres, et la tester sur des périodes de temps différentes via le walk-forward. Si l'avantage survit aux deux, la confiance monte.
Sur combien de marchés faut-il tester une stratégie ?
Il n'y a pas de nombre magique. Ce qui compte, c'est la diversité, pas la quantité. Mieux vaut deux ou trois marchés vraiment différents et bien choisis que dix marchés fortement corrélés qui répètent la même information.
Faut-il ré-optimiser les paramètres sur chaque nouveau marché ?
Non, surtout pas pendant le test. Le but est de vérifier si vos réglages actuels tiennent ailleurs. Si vous les ré-optimisez, vous recommencez à ajuster au hasard et le test ne prouve plus rien. Les paramètres doivent rester figés.
Une stratégie qui ne marche que sur un seul marché est-elle forcément mauvaise ?
Pas forcément, mais elle est suspecte. Un avantage vraiment propre à un marché existe, mais il est plus souvent le signe d'un sur-ajustement au hasard de ce marché précis. Tant que l'avantage n'a pas voyagé, restez prudent.
En bref
Une belle courbe sur un seul marché ne prouve rien. Elle peut cacher un vrai avantage comme une pure illusion. Le test multi-marchés tranche : un avantage réel laisse une trace ailleurs, un hasard reste sur place. À condition de choisir le marché en fonction du comportement de votre stratégie, de figer les paramètres, et de juger la survie de l'avantage plutôt qu'un chiffre identique.
Ce raisonnement est exactement là où une approche par machine learning change la donne. Au lieu d'utiliser un indicateur avec une règle rigide, du type « j'achète quand le signal passe tel seuil », vous fournissez cet indicateur comme une donnée parmi d'autres à un modèle, et le modèle apprend lui-même comment ce signal se relie aux mouvements qui suivent. C'est ce que permet un outil comme AlgoBacktest, sur le Forex, les actions, les ETF, les indices et les futures, sans écrire une ligne de code.
Deux choses collent directement à ce que vous venez de lire. D'abord, quand le modèle est testé, il l'est sur des données qu'il n'a jamais vues : vous disposez déjà, de base, d'une preuve de robustesse. Ensuite, une fonction Re-Test permet de ré-évaluer un modèle déjà entraîné sur n'importe quel autre marché et n'importe quelle autre date, sans le ré-entraîner. C'est très exactement le test de cet article : mêmes réglages, marché jamais vu. Des preuves, pas des promesses.
Le trading comporte des risques réels de perte en capital, et aucun test ne les supprime. Un outil comme celui-ci sert à chercher et à valider, pas à garantir un gain. Les performances passées ne préjugent pas des performances futures.