拿下技术面上传简历

一个二分类场景正类占比 1%(例如欺诈),模型评估得到 ROC-AUC = 0.90,PR-AUC = 0.15。业务要求:在召回不低于 70% 的前提下让人工审核的准确率尽量高。请解释这两个数字放在一起说明什么,你会怎么定阈值,以及你更该优化哪个指标。

机器学习基础模型评估与调优1-3 年知识点 1 个

面试官在考什么

是否理解 ROC 在极端不平衡下被大量负样本稀释而显得乐观、PR-AUC 的基线随正类比例变化,以及评估指标与阈值决策是两件事。

AUC/PR/ROC

回答框架 · 前两步

  1. ROC-AUC 0.90 只说明整体排序能力不差,但 ROC 的横轴 FPR 分母是海量负样本,正类稀少时这个指标偏乐观
  2. PR-AUC 的随机基线是正类占比 0.01,0.15 相对基線有增益,但绝对水平说明高分段正类纯度不足

还有 3 条答案要点、 3 层追问、 5 个常见坑, 以及针对你简历的追问路径,在定制报告里。

上传简历,生成我的题库先看示例报告

延伸阅读

想看这个方向的整体准备路线? 进入「机器学习基础」方向页

同一能力域的其他题