互动练习 10 / 12

过度拟合与数据切分实验

这是一个虚构评分游戏。参数试得越多,研究期冠军通常越漂亮;测试期不会因为你试得勤快而自动变好。

预计用时12 分钟
练习目标识别选择偏差和错误切分
指标教学分数,没有投资含义

改变研究过程

当前切分

前段学习,中段选择,后段只考试一次。

研究冠军来到测试期

研究期最佳分数0.00
独立测试分数0.00
乐观差距0.00

把冠军锁在研究区

参数只能在训练和验证阶段选择。最终测试打开后,任何修改都会让它变成新的验证数据。需要继续研究时,应准备新的后续数据或明确建立下一轮流程。