模型指标评估,模型本身指标的评估

1、测试集评估

2、线上指标评估

业务指标评估,方便给业务方进行解释,模型能实际产生的效果

1、测试集业务指标评估

2、线上回测业务指标评估

为什么要进行线上评估,在模型开发过程中,遇到的数据真的是各种情况都可能遇到,主要排除的是特征泄露导致的训练集模型效果很好,但是实际效果并不好,这样只能在生产上进行验证