实验追踪规范

实验追踪不是为了记录一切，而是为了让关键结论可以被找到、验证和复用。

追踪目标

实验追踪系统应该帮助研究者在几周甚至几个月之后，仍然能准确回答这次实验用的是什么数据、参数和评估逻辑。

必须记录的字段

1. 数据快照版本。
2. 特征定义和参数。
3. 回测配置与成本模型。
4. 评估指标与结论摘要。

推荐字段

• 实验 ID 与负责人
• 关联报告链接
• 候选池状态
• 失败原因或被拒原因

推荐实践

• 为每次实验生成唯一 ID。
• 报告与图表绑定同一版本号。
• 失败实验也保留简短结论。

典型问题

1. 只记录成功实验，导致重复踩坑。
2. 图表和报告分散存储，无法一键回看。
3. 数据快照没有版本号，复现时口径漂移。