실패 모드
꼬리 집중 (잭팟)
거의 모든 수익이 소수의 특이한 날에서 발생했습니다. 이 날들을 곡선에서 제거하면 우위도 함께 사라집니다.
이것이 꼬리 집중 수익, 즉 잭팟 위험의 메커니즘입니다. 전략은 몇몇 세션을 제외하고는 아무런 유용한 활동 없이 수년 동안 수익성이 있는 것처럼 보일 수 있으며, 백테스트는 이것이 우연이라는 것을 알지 못합니다. 총 수익은 수익이 어디서 왔는지 보여주지 않기 때문입니다.
이것은 우리가 보는 가장 매혹적인 실패 모드입니다. 헤드라인 수익은 어떻게 구성되었든 상관없이 화려하게 보이기 때문입니다. 네 번의 격렬한 날에 기반한 곡선과 사백 번의 조용한 날에 기반한 곡선은 마케팅 슬라이드에서 동일한 총계를 나타낼 수 있습니다. 요약 통계에는 어떤 것을 보고 있는지 경고하는 내용이 없습니다. 곡선을 열어 끝에 있는 숫자뿐만 아니라 일일 수익 분포를 살펴보아야 합니다.
우리는 이를 직접 테스트합니다: 상위 10%의 수익성 있는 날들을 제거하고 남은 부분으로 전략을 다시 실행합니다. 실제 우위를 가진 전략은 계속 작동하며, 수익은 감소하고 곡선은 덜 흥미로워지지만, 양의 값을 유지하고 형태를 유지합니다. 잭팟 전략은 최고의 날들을 제거하는 순간 무너집니다. 그 날들은 지속적인 성과의 표본이 아니었기 때문입니다. 그 날들이 전체 성과였습니다.
꼬리 집중 수익은 감사에서 세 번째로 흔한 거부 사유입니다. 총 우위가 전혀 없거나 시장 베타를 위장하여 따르는 것 다음입니다. 또한 사람들을 가장 오랫동안 속이는 요인이기도 합니다. 높은 샤프 비율과 부드러워 보이는 곡선은 모두 표본에 소수의 특이한 날들이 포함되어 있어도 유지될 수 있으며, 통계는 집중도를 자동으로 표시하지 않습니다. 직접 찾아야 합니다.
실제 문제는 통계뿐만 아니라 타이밍입니다. 잭팟 날을 미리 계획할 수 없습니다. 실전에서, 일년에 몇 번의 특정 움직임을 포착하는 데 의존하는 전략은 주말 갭, 브로커 장애 또는 백테스트가 가정한 것보다 더 나쁜 체결로 인해 그 중 하나를 놓칠 가능성이 가장 높은 전략입니다. 최고의 날을 놓치면, 서류상으로는 무적처럼 보였던 전략은 나머지 한 해 동안 평탄한 수준으로 회복하기 위해 애쓰며, 종종 내내 깊은 하락 상태에 빠집니다.
다섯 개의 양봉에 의존하는 곡선은 시스템이 아닙니다. 그것은 시스템의 옷을 입은 다섯 번의 행운의 날들의 사진입니다.
이 연구의 배경
- Bailey & López de Prado (2014). “The Deflated Sharpe Ratio: Correcting for Selection Bias, Backtest Overfitting and Non-Normality.” Journal of Portfolio Management 40(5). — 백테스트 과적합 및 팻테일 수익률에 대해 샤프 비율을 수정하는 방법을 보여줍니다. 이는 잭팟 곡선이 유발하는 왜곡과 정확히 일치합니다.
- Lo (2002). “The Statistics of Sharpe Ratios.” Financial Analysts Journal 58(4). — 수익률 시리즈 통계가 연간 성과 수치를 과대평가할 수 있는 방법을 보여줍니다. 이는 소수의 특이한 날들이 샤프 비율에 대해 설정하는 함정과 동일합니다.
- López de Prado (2018). “Advances in Financial Machine Learning.” Wiley. — 전략 연구에서 백테스트 과적합 및 잘못된 발견을 다룹니다. 이는 꼬리 집중 결과가 나타내는 더 넓은 문제입니다.
외부 연구 자료이며, 맥락 이해 및 추가 독서를 위해 연결되었습니다. FoxAlgo는 독립적이며 이 저자나 출판사와 제휴하지 않습니다.
이것들은 더 노 리스트 뒤에 있는 용어들입니다. — 모든 전략과 지표가 명시된 전체 감사 보고서로, 그 결과와 생존 또는 실패의 정확한 이유가 담겨 있습니다.
더 노 리스트 받기 →