一个风控模型对某批样本输出预测概率 0.8,但在这批「被预测为 0.8」的样本里,实际只有 55% 是正例。请说明这是什么问题、你用什么方法能看出来并量化它、以及常用的修正手段。
面试官在考什么
是否能把「排序能力」和「概率是否可信」区分开,知道校准曲线/校准误差这类诊断工具和至少一种修正方法。
回答框架 · 前两步
- 这是概率校准问题:预测概率与真实正例频率不一致,模型系统性高估。
- 诊断方法:画可靠性图/校准曲线,把预测概率分箱,比较每箱的平均预测概率与实际正例率;量化可用 ECE 或 Brier score。
还有 3 条答案要点、 3 层追问、 4 个常见坑, 以及针对你简历的追问路径,在定制报告里。
延伸阅读
想看这个方向的整体准备路线? 进入「机器学习基础」方向页