Tryb awarii
Skoncentrowany na ogonie (jackpot)
Prawie cały zysk pochodził z kilku dni odstających od normy. Wystarczy je wytrącić z krzywej, a przewaga zniknie wraz z nimi.
To właśnie mechanizm stojący za zyskiem skoncentrowanym w ogonie, zwanym również ryzykiem jackpota. Strategia może przez lata wyglądać na zyskowną, nie przynosząc żadnych korzyści w ciągu wszystkich sesji poza kilkoma, a backtest nie ma pojęcia, że to przypadek, ponieważ całkowity zwrot nie pokazuje, skąd się wziął.
To najbardziej uwodzicielski tryb porażki, jaki widzimy, ponieważ główny zwrot wygląda spektakularnie, niezależnie od sposobu jego zbudowania. Krzywa oparta na czterech szalonych dniach i krzywa oparta na czterechset spokojnych dniach mogą wygenerować tę samą sumę na slajdzie marketingowym. Nic w statystykach podsumowujących nie ostrzega, na który z nich patrzysz. Musisz otworzyć krzywą i przyjrzeć się rozkładowi dziennych zwrotów, a nie tylko liczbie na końcu.
Testujemy to bezpośrednio: usuwamy 10% dni z najlepszymi wynikami i ponownie uruchamiamy strategię w pozostałych. Strategia z realną przewagą nadal działa, stopa zwrotu spada, krzywa staje się mniej ekscytująca, ale pozostaje dodatnia, a kształt się utrzymuje. Strategia jackpota załamuje się w momencie usunięcia jej najlepszych dni, ponieważ te dni nigdy nie były próbką bieżących wyników. Stanowiły całość wyników.
Koncentracja zysku na ogonie to trzecia najczęstsza przyczyna odrzuceń w całym audycie, po całkowitym braku przewagi brutto i ukrytym wykorzystywaniu bety rynkowej. To również ta, która najdłużej zwodzi ludzi. Wysoki współczynnik Sharpe'a i gładka krzywa mogą przetrwać kilka dni z obserwacjami odstającymi w próbie, a statystyki nie sygnalizują automatycznie koncentracji. Trzeba jej szukać.
Praktycznym problemem jest czas, a nie tylko statystyki. Nie da się zaplanować dnia z jackpotem z góry. W rzeczywistości strategia, która polega na wychwyceniu kilku konkretnych ruchów w ciągu roku, to strategia, która najprawdopodobniej przegapi jeden z nich z powodu weekendowej luki, awarii brokera lub wypełnienia, które okaże się gorsze niż zakładano w testach wstecznych. Przegap najlepszy dzień, a strategia, która na papierze wydawała się nie do ruszenia, przez resztę roku będzie się cofać do poziomu płaskiego, często pogrążając się w głębokim spadku .
Krzywa oparta na pięciu zielonych świecach to nie system. To fotografia pięciu szczęśliwych dni w ubraniach systemu.
Badania, które za tym stoją
- Bailey i López de Prado (2014). „Zmniejszony współczynnik Sharpe’a: Korekta błędu selekcji, nadmiernego dopasowania testu wstecznego i odchylenia od normy”. Journal of Portfolio Management 40(5). — Pokazuje, jak skorygować współczynnik Sharpe’a pod kątem nadmiernego dopasowania testu wstecznego i grubych ogonów zwrotu – dokładnie takiego samego zniekształcenia, jakie wprowadza krzywa jackpota.
- Lo (2002). „Statystyka wskaźników Sharpe’a”. Financial Analysts Journal 58(4). — Pokazuje, jak statystyki szeregów zwrotów mogą zawyżać roczną wartość wyników, tę samą pułapkę, którą zastawia kilka dni z wartościami odstającymi od normy dla wskaźnika Sharpe’a.
- López de Prado (2018). „Postępy w uczeniu maszynowym w finansach”. Wiley. — Omawia nadmierne dopasowanie testów wstecznych i fałszywe odkrycia w badaniach strategicznych, szerszy problem, którego jednym z objawów są wyniki skoncentrowane na ogonach.
Badania zewnętrzne, linki do kontekstu i dalszych materiałów. FoxAlgo jest niezależny i nie jest powiązany z tymi autorami ani wydawcami.
Oto warunki, na których opiera się Lista No — pełny audyt, obejmujący każdą strategię i wskaźnik, wraz z jego werdyktem i dokładnym powodem istnienia lub zniknięcia.
Pobierz listę zakazów →