Mode de défaillance
Pas d'avantage réel (pas d'avantage brut)
L'absence d'avantage brut signifie que les entrées d'une stratégie ne surpassent jamais un tirage au sort, même avant de prendre en compte les coûts. C'est la raison la plus courante pour laquelle nous rejetons une stratégie, et la moins attendue.
Une stratégie présente un avantage lorsque ses règles surpassent un pari aléatoire sur le même titre, avant même qu’un centime de coût ne vienne s’en déduire. L’absence d’avantage brut signifie que le signal n’a jamais rien prédit. Les entrées n’étaient que du bruit déguisé en logique.
C’est la raison la plus courante pour laquelle nous rejetons une stratégie, et c’est le résultat auquel les gens s’attendent le moins. Près de la moitié de tout ce que nous écartons a échoué à ce stade précis, avant même que le slippage ou le spread n’entrent en ligne de compte. On entend souvent dire que les coûts tuent les stratégies. La plupart du temps, ils n’en ont même pas l’occasion. La plupart des systèmes rejetés n’ont jamais vu le jour.
Le test pour le vérifier est mécanique. Prenez le nombre exact de transactions de la stratégie, sa durée de détention exacte, son exposition exacte au marché, et remplacez la logique d’entrée par un tirage au sort. Répétez l’opération quelques milliers de fois. Si le rendement de la stratégie réelle se situe dans la fourchette des résultats aléatoires au lieu de s’en démarquer nettement, les règles n’ont rien apporté. Quelle que soit la forme de la courbe de capital, elle ne constitue pas une prévision.
Il s’agit d’un échec différent de celui du « trend-beta », où une stratégie franchit certes la barre du hasard, mais uniquement parce qu’elle était discrètement positionnée à l’achat sur un marché en hausse. Aucun avantage brut n’est plus flagrant : la stratégie ne parvient même pas à franchir cette barre basse. Il n’y a aucun signal à expliquer, car il n’y en a jamais eu.
Le bruit passe plus facilement pour un avantage qu’il ne le devrait, car tester suffisamment de variantes de règles sur le même historique garantit que certaines d’entre elles dépasseront le hasard par simple coïncidence. C’est le phénomène des tests multiples à l’œuvre. Ajustez les paramètres jusqu’à ce que l’un de ces hasards s’adapte parfaitement aux données, et vous tombez dans le piège du surajustement. Mélangez la série de cours et relancez la règle : c’est un test placebo, et une stratégie sans véritable avantage se comporte aussi bien sur des données fictives que sur des données réelles. C’est là que réside l’indice révélateur.
Lorsque l’on ramène la courbe de capital à la simple question de savoir si la règle a réellement prédit le mouvement suivant, la réponse est généralement non. On impute souvent l’échec aux coûts, car ils sont faciles à visualiser sur un tableur. L’absence de véritable signal est plus difficile à admettre, c’est pourquoi elle est rarement mise en avant.
L’analyse complète des raisons pour lesquelles les stratégies échouent →
Les travaux de recherche à l’origine de cet article
- White (2000). « A Reality Check for Data Snooping ». Econometrica 68(5). — Formalise la question de référence du « lancer de pièce » : la meilleure des nombreuses règles testées surpasse-t-elle véritablement le hasard, ou a-t-elle simplement été sélectionnée parmi de nombreux essais ?
- Sullivan, Timmermann & White (1999). « Data-Snooping, Technical Trading Rule Performance, and the Bootstrap ». Journal of Finance 54(5). — A soumis un siècle de règles de trading sur l’indice Dow à ce même type de test ; la meilleure règle intra-échantillon n’a pas réussi à reproduire ses performances une fois que l’effet de « data snooping » a été pris en compte.
- Bailey, Borwein, López de Prado & Zhu (2014). « Pseudo-mathématiques et charlatanisme financier : les effets du surajustement des backtests sur les performances hors échantillon ». Notices of the AMS 61(5). — Montre comment le test d’un grand nombre de variantes de règles peut produire un backtest très convaincant, même lorsque la logique sous-jacente ne permet de prédire aucun résultat concret.
Recherches externes, dont les liens sont fournis à titre de contexte et pour approfondir le sujet. FoxAlgo est indépendant et n’est affilié ni à ces auteurs ni à ces éditeurs.
Ce sont les termes qui se cachent derrière « The No List » — l’audit complet, chaque stratégie et indicateur cités, avec leur verdict et la raison exacte de leur sélection ou de leur rejet.
Obtenir « The No List » →