Backtesting term
Sharpe-ratio
De Sharpe-ratio is het getal dat handelaren gebruiken om een solide indruk te wekken: rendement per risico-eenheid, in één helder cijfer. Het is echter ook een van de gemakkelijkste cijfers om te manipuleren.
De Sharpe-ratio meet het rendement per risico-eenheid : neem het gemiddelde rendement van een strategie, trek daar de risicovrije rente vanaf en deel door de volatiliteit van dat rendement. Een strategie die 20% per jaar oplevert met grote schommelingen kan slechter scoren dan een strategie die 12% stabiel oplevert. De ratio is specifiek ontwikkeld om die volatiliteit te beprijzen.
Het ruwe rendement zegt niets over hoe je dat rendement hebt behaald, en het winstpercentage zegt nog minder. Een systeem kan 90% van zijn transacties winnen en toch slecht aflopen, omdat de verliezen die het lijdt jarenlange winsten tenietdoen – de faalmodus die we staartgeconcentreerd risico noemen. Sharpe dwingt die volatiliteit in het getal, en daarom is het het dichtstbij dat backtesting komt bij een enkele kwaliteitsscore. Het dichtstbij. Maar niet perfect.
De ratio gaat ervan uit dat rendementen zich clusteren rond een normale, klokvormige verdeling . De meeste handelsstrategieën doen dat niet. Een grid- of DCA-systeem kan maandenlang kleine, gestage winsten boeken en dan plotseling een enorme daling laten zien die alles tenietdoet. Totdat dat gebeurt, lijkt de Sharpe-ratio stabiel, omdat de uiteindelijke daling nog niet heeft plaatsgevonden binnen de gemeten periode.
Seriële correlatie maakt het erger. Strategieën die posities over meerdere bars aanhouden, of handelen in instrumenten die niet onafhankelijk van elkaar van dag tot dag bewegen, kunnen stabieler lijken dan ze in werkelijkheid zijn. Dat onderschat de werkelijke volatiliteit en blaast de geannualiseerde Sharpe-ratio op tot ver boven wat de werkelijke situatie bij live trading ooit zou opleveren.
Dan is er nog het aantal strategieën dat je hebt geprobeerd om tot de gewenste strategie te komen. Test 500 varianten van een idee en rangschik ze op basis van de Sharpe-ratio, en het beste resultaat is deels te danken aan vaardigheid en deels aan het geluk van 500 pogingen. De Sharpe-ratio van één enkele backtest, die op zichzelf wordt weergegeven zonder rekening te houden met de zoekopdracht, zegt vrijwel niets over de vraag of het voordeel ook buiten de steekproef waarop het is gemeten, standhoudt.
We nemen een Sharpe-ratio in de koptekst niet zomaar voor waar aan. Elke kandidaat die een eerste test doorstaat, wordt buiten de steekproef gecontroleerd en elke overlevende wordt onderworpen aan een kritische audit op vooruitkijkende vertekening voordat we iets als betrouwbaar beschouwen. Een gunstige Sharpe-ratio naast een zwakke winstfactor of een rendementsstroom die geconcentreerd is in de staart van de markt, vertelt ons dat het cijfer is gemanipuleerd. De ratio is nuttig. Het is ook een van de gemakkelijkste statistieken in de handel om te manipuleren zonder ook maar één transactie te veranderen.
Het onderzoek hierachter
- Sharpe (1994). “De Sharpe-ratio.” Journal of Portfolio Management 21(1). — De oorspronkelijke definitie van de ratio, door de econoom die hem bedacht, uiteengezet samen met de door hemzelf aangegeven toepassingen en beperkingen.
- Lo (2002). “De statistieken van Sharpe-ratio’s.” Financial Analysts Journal 58(4). — Analyseert het statistische gedrag van de Sharpe-ratio en laat zien dat autocorrelatie een geannualiseerd cijfer kan opblazen.
- Bailey & López de Prado (2014). “The Deflated Sharpe Ratio: Correcting for Selection Bias, Backtest Overfitting and Non-Normality.” Journal of Portfolio Management 40(5). — Stelt een gecorrigeerde Sharpe-ratio voor die rekening houdt met het aantal geteste strategieën en met niet-normale, dikstaartige rendementen.
Extern onderzoek, met links voor context en verdere lectuur. FoxAlgo is onafhankelijk en niet gelieerd aan deze auteurs of uitgevers.
Dit zijn de voorwaarden achter De Nee-lijst — de volledige audit, waarbij elke strategie en indicator wordt genoemd, met het oordeel en de exacte reden waarom deze wel of niet is aangenomen.
Download de 'Nee'-lijst →