参数扫描:多重检验、平台与孤峰

学习目标

  • 解释为何多次检验中的最优结果会高估真实优势。
  • 运行包含您原设参数及其相邻值的参数扫描。
  • 运用平台规则区分平台与孤峰。
  • 在不消耗验证期的前提下解读扫描热力图。

课后测验

作答后即可查看解析,答题结果不会保存。

  1. 单参数扫描中,最优长度 100 日得分 +0.18,相邻的 75 日和 125 日分别为 +0.02 和 −0.04。按平台规则如何判定?

    1. A 平台
    2. B 孤峰
    3. C 没有任何参数组合跑赢基准
    查看答案

    答案:B。 相邻值的中位数为 −0.01,远低于 +0.18 的一半,且两者中只有一个为正,因此是孤峰。

  2. 最优格得分 +0.20,有 4 个有效相邻格:+0.14、+0.16、+0.11 和 −0.02。按平台规则如何判定?

    1. A 孤峰,因为有一个相邻格为负
    2. B 相邻参数过少,无法判断
    3. C 平台
    查看答案

    答案:C。 相邻格的中位数为 +0.125,高于 +0.20 的一半,且四个中有三个为正,超过三分之二。

  3. 为何扫描热力图只用训练期结果着色?

    1. A 因为验证期覆盖的年份太少,不足以为每个格子着色
    2. B 避免借验证期挑选格子,使其仍是公平的检验
    3. C 训练期结果总是更准确
    查看答案

    答案:B。 若网格显示验证期结果,挑选验证期最优格就会把验证期变成训练数据。完整的验证期结论只针对原设参数给出。

  4. 对一条没有真实优势的规则测试 30 组参数,检验期 15 年。最优的那组会是什么样子?

    1. A 其结果与其余各组一样,都非常接近于零
    2. B 它是真正的最优参数,应当交易
    3. C 它可能纯粹出于偶然而显得相当体面
    4. D 它总是为负
    查看答案

    答案:C。 多中选优挑出的正是运气助力最大的那一个。在本课的模拟中,30 个噪声策略中的最优者夏普比率达到 0.54。

  5. 您原设的参数位于一座孤峰上,而网格的其他位置出现了平台。合理的反应是什么?

    1. A 怀疑原有结果;改用平台上的参数属于一项经过调优的新研究
    2. B 立即按原设参数进行交易,因为它们在整个训练期中的得分最高
    3. C 扩大网格,直到原设参数位于平台上
    查看答案

    答案:A。 孤峰很可能出于运气。看过扫描后改用平台上的参数,只有在将其视为经过调优的研究、并降低对其验证期结果的信任时才算合理。

在 Clear Tape 中继续学习

注册免费账户后,可保存学习进度与测验成绩,使用练习题库与错题本,并查看真实行情图例。