arxiv A Closer Look at AUROC and AUPRC under Class Imbalance

名称
A Closer Look at AUROC and AUPRC under Class Imbalance
首页
https://yiyibooks.cn/arxiv/2401.06091v2/index.html
原始地址
https://arxiv.org/abs/2401.06091
描述
在机器学习 (ML) 中,有一句广为流传的格言是,对于具有类别不平衡的二元分类任务,精确回忆曲线下面积 (AUPRC) 是模型比较的一个优越指标,优于接收者操作特征下面积 (AUROC)。本文通过新颖的数学分析挑战了这一概念,说明 AUROC 和 AUPRC 可以用概率术语简洁地关联起来。我们证明,与普遍看法相反,AUPRC 在类别不平衡的情况下并不优越,甚至可能是一个有害的指标,因为它倾向于过度支持在具有更频繁的积极标签的亚群中进行模型改进 ...