Сколько сделок нужно, чтобы оценить результат трейдера
Почему универсального числа сделок нет и как размер выборки, зависимость операций и рыночные режимы влияют на выводы.
Число без условий не работает
Утверждения «достаточно двадцати сделок» или «после ста всё ясно» пропускают важные предпосылки. Нужный объём наблюдений зависит от исследуемого показателя, разброса результатов и допустимой неопределённости. Десятки сделок в одном коротком движении могут содержать меньше разнообразной информации, чем более редкие операции за несколько режимов рынка. Поэтому считать строки полезно, но превращать их количество в сертификат качества стратегии нельзя.
Неопределённость доли побед
Если в небольшой учебной серии половина операций прибыльна, наблюдаемая доля побед равна 50%. Это оценка по выборке, а не известная вероятность всех будущих попыток. Для долей существуют доверительные интервалы, включая метод Уилсона, описанный NIST. Они показывают неопределённость оценки при заданных предпосылках. Такой интервал нельзя читать как гарантию того, что рыночная вероятность не изменится, особенно когда условия торговли нестабильны.
Почему сделки бывают зависимыми
Пять входов в один инструмент во время одного новостного импульса не обязательно представляют пять независимых испытаний. У них может быть общий источник результата. Аналогично позиции в тесно связанных активах способны одновременно реагировать на одно событие. Отмечайте такие группы и сравнивайте статистику по дням, неделям или отдельным эпизодам. Простое увеличение количества частичных входов не должно искусственно создавать ощущение большой исследовательской базы.
Практический критерий готовности
До теста запишите, какие условия он должен охватить: спокойные и резкие движения, разные издержки, периоды с низкой ликвидностью. Покажите не только среднюю оценку, но и её чувствительность к отдельным группам наблюдений. Если вывод резко меняется после удаления одного дня, это важнее круглого числа сделок. Заканчивайте отчёт перечнем того, что уже проверено и что остаётся неизвестным. Такой подход помогает планировать следующую выборку без обещания, что после определённого количества операций исчезнет неопределённость.
Если трейдер указывает тысячи сделок, уточните, сколько независимых рыночных эпизодов за ними стоит. Тысяча небольших закрытий одного алгоритма в течение короткого спокойного периода может плохо описывать его поведение при резком переходе рынка в другой режим.
ПУЛЬС / ЗНАНИЯ
ПУЛЬС / ЗНАНИЯ