Анализ результатов тестирования
Мы хотим, чтобы тест показал нам процент выигрышей, основанный, насколько это возможно, на правильности направления вхождения и задания времени вхождения без учета других соображений. Удалите все проскальзывания и комиссионные расходы и не используйте остановок. Будет еще достаточно возможностей для включения фактора соответствующих расходов, когда в будущем мы соберем систему для совокупного тестирования. Так как вы не используете остановки или какие-либо другие реальные выходы, показатели совокупного дохода, полученные в результате тестирования такого типа, по существу, не имеют смысла. Сейчас мы вынуждены рассматривать доходы и потери как случайности рынка. То же верно и для отношений среднего дохода к средним потерям. Когда мы закончим собирать нашу объединенную систему, текущие остановки и выходы фиксации дохода определят значения этих величин. На этом этапе важной величиной для сравнения вхождений является процент выигрышей. »
Тестирование вхождений, выходов и остановок
После того, как вы подобрали элементы вашей торговой системы, возникает соблазн немедленно протестировать ее как единое целое. Кроме всего прочего, система по своему составу и определению есть совокупность взаимосвязанных частей, и кажется разумным, что она должна тестироваться в комплексе. Проблема такого подхода заключается в том, что один элемент системы может улучшать или ухудшать результаты относительно остальных. У вас может быть прекрасный метод вхождений, однако, если у вас слабые выходы, это забракует ваши вхождения вместе с оставшейся частью системы, если результаты совокупной производительности не удовлетворят вашим стандартам. Также хорошо бы знать, насколько часто используется один элемент по сравнению с остальными. Если ваш контроль рисков состоит из двух типов остановок, простой долларовой остановки и недавнего пика или впадины, то в процессе разработки и тестирования вам поможет знание того, как часто включается каждая из этих остановок. »
Процент выигрышей
Наиболее успешные трейдеры, используя метод следования за трендом, получают от 35 до 45 процентов выигрышей. Сложно получить более 55 процентов, в чем вы сможете убедиться, когда мы будем проводить настоящее тестирование. Будьте особенно внимательны к воздействию, которое оказывают остановки на процент выигрышей.
Отношение среднего выигрыша к среднему проигрышу (Ratio of Average Win to Average Loss)
Эта величина должна превосходить 1:1 (безубыточность). Очевидно, значение 3; 1 или 4:1 выглядит хорошо, но, если вы получаете скромный процент выигрышей 2:1 или даже менее, это также принесет вам достаточный доход.
Обшая отдача и максимальный убыток (Total Return and Maximum Drawdown)
»
Тестирование для получения определенных результатов
Торговую систему необходимо разрабатывать с нуля, чтобы она достигла определенных значений критериев производительности. Вероятно, наиболее важными из возможных целей являются процент выигрышей и отношение среднего выигрыша к среднему проигрышу. Эти критерии могут быть использованы для вычисления вероятности провала (FOR - probability of ruin), которая дает вам некоторое представление о надежности вашей системы. Большая часть программного обеспечения для тестирования дает и другие полезные данные. Ниже приведено их перечисление с комментариями.
Совокупный доход (Net Profit)
»
Измерение производительности
Очевидной целью торговой системы является прибыльность. Сколько денег делает ваша модель? Другим способом вычисления этого фактора является процент отдачи, который является годовой отдачей, основанной на количестве средств, требуемых для торгового счета. Процент отдачи следует искать на всем периоде тестирования, а затем разбить его на небольшие отрезки для изолирования негативных периодов. Помните, что процент отдачи - это просто функция от объема используемого капитала. Вы можете удвоить процент отдачи, если начнете торговать только с половиной капитала, но систему вы при этом не улучшите. Вы можете улучшить систему, начав торговать с большим капиталом, но процент отдачи соответственно уменьшится. Несерьезные и бессмысленные торговые соревнования выигрываются путем получения большой отдачи при небольших размерах начального капитала. Эти переоцениваемые торговые соревнования дают в результате нежизнеспособные или наигранные исторические записи, что становится очевидным, когда мы наблюдаем низкую производительность товарных паевых фондов, управляемых некоторыми известными победителями подобных соревнований. »
Выбор данных для тестирования
Насколько нам известно, не существует коммерческого тестового программного обеспечения, включающего возможность проводить торговлю от одного контрактного месяца до другого без того, чтобы вызвать разрыв в значениях любого технического исследования, которое оно в это время вычисляет. Разрыв делает неполноценным исследование и, следовательно, сам тест. Разумеется, теоретически возможно снабдить компьютер сериями контрактных месяцев по данному товару, протестировать каждый месяц по отдельности и затем объединить результаты, но мы не можем себе представить более утомительной и склонной к ошибкам процедуры.
Решение кроется в расположении ваших данных последовательно без разрывов, что позволит проводить непрерывное тестирование. Мы не будем углубляться в детали, как обеспеченить гладкий переход от одного контракта к другому, но мы довольствуемся этим, при условии, что результаты получатся в разумной степени точными. »
Выбор периода тестирования
Другой важной и часто недооцениваемой областью является выбор периода тестовых данных. По крайней мере, период тестирования должен быть достаточно продолжительным для проведения минимум 30 торгов на каждом рынке. Получение менее 30 торгов нарушает одно из основных правил теории выборок, которое гласит, что должно существовать по меньшей мере 30 точек данных для того, чтобы
набор данных отвечал нормальному распределению. Отметьте, что это касается не дней, недель или месяцев данных, а происшедших торгов. Любое число менее 30 произведет статистически ненадежные результаты. Чем больше количество торгов, тем лучше.
Не менее важно, чтобы рыночные периоды, которые вы тестируете, включали в себя как можно больше примеров всевозможных рыночных условии. Направления вверх, вниз и вбок являются простейшими (хотя и субъективными) примерами возможных рыночных условий. Исследуемый вами период должен содержать как можно боль-1 ше примеров. Нашей целью является моделирование возможных условий будущего путем включения максимального числа рыночных условий прошлого.