样本外验证怎么做,两段数据足够起步
发布时间:30分钟前阅读:28
学量化迟早会听到一句铁律:回测结果要看样本外。很多新手知道这个词,却不知道具体怎么做,总觉得需要高深的统计方法。其实起步阶段的样本外验证,两段数据就足够了,方法简单到你今天就能动手。
先说它为什么是铁律。回测是在历史数据上找规律,你在同一段数据上反复试验,总能试出表现好的参数组合——但这很可能是巧合,是策略把这段数据的噪音背下来了。样本外验证的逻辑就是:用一段数据发现规律,用另一段它没见过的数据检验规律。只有在新数据上也站得住的表现,才有资格被当成真规律。
起步版做法分四步。第一步切数据:把你的历史数据按时间顺序分成两段,前段六成到七成,后段剩下的部分。比如十年数据,前七年做开发段,后三年做验证段。第二步在开发段做所有事情:设计规则、调参数、优化逻辑,随便折腾,这段数据就是你的草稿纸。第三步冻结策略,去后段跑:参数一个都不许再动,策略在验证段的表现就是它的真实成绩单。第四步对比判断:验证段表现与开发段大致相当,规律可信度较高;验证段明显崩掉,说明开发段学到的是噪音,回去重来。
几个容易做错的细节要提醒。一是一定按时间顺序切,不能随机切,因为你要检验的是对未来的预测力,未来在时间轴的后方。二是只能验证一次的纪律:反复在验证段上调参,验证段就被污染成了第二段开发数据,等于考试前偷看了卷子。真要做多轮验证,正确的做法是把数据切成更多段轮换,或者留一段最终保密段只测一次。三是验证段也别太短,太短的区间结果受运气影响大,说服力不足。
做完这两段验证,策略能不能进模拟盘,就有了硬标准:两段表现都过关才进,验证段不过关的,无论回测多漂亮都淘汰。判断你做对了的标准:你能说出自己策略在两段数据上各自的表现数字,并且两个数字差距不大。做到这个,你已经把大多数只看总体回测曲线的人甩在身后了。
温馨提示:投资有风险,选择需谨慎。



问一问
从业认证

+微信
分享该文章
