Сравнивать с рынком на том же отрезке
Сравнение с рынком имеет смысл только на том же отрезке времени, что и сама стратегия. Иначе цифру можно получить любую.
В чём подвох
Когда у правила есть результат, его хочется с чем-то сравнить: обычно с покупкой и удержанием. И тут легко подставить не то число.
Самый частый случай — взять известную цифру доходности рынка за длинный период и сравнить с результатом правила за короткий. Периоды разные, состояния рынка разные, и сравнение не значит ничего.
Хуже, когда цифра для сравнения берётся по памяти. Она почти всегда оказывается оптимистичной: запоминаются хорошие годы.
Как делать
Считать обе стороны на одном и том же отрезке, с одной и той же даты по одну и ту же дату. Если правило работало год, то и рынок надо считать за тот же год — даже если в этот год рынок падал и сравнение получается слишком лестным.
Второе: сравнивать не только заработок, но и глубину провалов счёта. Стратегия, которая дала столько же при вдвое меньшей просадке, — это другой результат, а не такой же.
Третье: если сравниваешь с простой планкой вроде «покупать, когда цена выше средней за столько-то дней», проверить саму планку. Такие ориентиры звучат солидно и часто оказываются хуже обычной покупки.
Что обычно выясняется
Что рынок на выбранном отрезке ведёт себя совсем не так, как в общей памяти. Отрезок, на котором проверялось правило, может целиком лежать внутри падения, и тогда любое положительное правило выглядит чудом, хотя чуда нет.
И что популярные ориентиры не выдерживают проверки: стоит посчитать их на том же отрезке, и они оказываются худшим из вариантов, а не эталоном.
Чего это не даёт
Правильное сравнение не делает стратегию пригодной. Обогнать падающий рынок можно, просто ничего не делая.