模型验证

为什么回测结果很好,实际表现却可能下降

过拟合、数据泄漏、规则变化和重复试验都能制造虚高回测。

更新于 2026-09-20

本文采用可复核的规则假设,不根据站点名称推断任何平台的真实算法。示例用于教育说明,不是下注建议。

关键定义

反复调整参数直到旧数据表现最好,会把偶然噪声当作规律,这就是过拟合。

怎样核验

若特征包含预测时刻之后才知道的信息,或预处理同时看到了测试期,就发生数据泄漏。

边界与结论

平台规则、洗牌流程、记录方式或用户行为变化会造成分布漂移。

实践清单

应保留最终锁箱测试集,记录所有试验,并报告上线后的连续表现而非最佳片段。

实践清单

  • 反复调整参数直到旧数据表现最好,会把偶然噪声当作规律,这就是过拟合。
  • 平台规则、洗牌流程、记录方式或用户行为变化会造成分布漂移。
  • 先固定规则、保存完整记录、分离训练与测试,再讨论模型是否提供了超出简单基线的信息。