你在一个 5 万样本、200 维特征的数据集上训练 GBDT 做二分类。结果:训练集 logloss 0.05,验证集 logloss 0.42;学习曲线显示训练样本量从 1 万加到 5 万时,验证集 logloss 仍在下降但还没有收敛趋势。请判断当前是偏差主导还是方差主导,并给出你接下来会做的三个具体动作,以及每个动作预期会观察到什么现象。
面试官在考什么
能否用训练/验证误差的差距和学习曲线形状定位主导项,并给出与主导项匹配的动作,而不是条件反射地加正则。
回答框架 · 前两步
- 训练远低于验证且随样本量增加验证仍在下降,说明是方差主导,而不是偏差主导
- 判断依据是两者差距加上学习曲线右端是否收敛,不能只看验证误差的绝对值大不大
还有 3 条答案要点、 3 层追问、 5 个常见坑, 以及针对你简历的追问路径,在定制报告里。
延伸阅读
想看这个方向的整体准备路线? 进入「机器学习基础」方向页