有效的限制分配外(OOD)检测对于可靠的机器学习模型至关重要,但由于访问数据训练或干预训练等要求,大多数当前方法在实际使用中受到影响。我们提出了一种基于网络中间层之间的变换平滑度(BLOOD)来检测Transformer中OOD数据的新方法,该方法适用于消耗访问训练数据的预训练模型。BLOOD利用了分配内(ID)数据的层间表示变换比OOD数据的相应转变更平滑的趋势,我们也通过经验证明了这个特性...... ...
我们考虑在神经网络中检测不分布图像的问题。我们提出了 ODIN,这是一种简单有效的方法,不需要对预先训练的神经网络进行任何更改。我们的方法基于这样的观察:使用温度缩放并向输入添加小扰动可以分离分布内和分布外图像之间的 softmax 分数分布,从而实现更有效的检测 ...
近年来,计算机辅助诊断受益于基于深度学习的计算机视觉技术的发展。传统的监督深度学习方法假设测试样本是从与训练数据相同的分布中抽取的。然而,在现实临床场景中可能会遇到分布不均的样本,这可能会导致基于深度学习的医学图像分析任务无声地失败 ...
泛化性被视为深度学习的主要挑战之一,特别是在医学成像领域,医院或成像常规的改变可能导致模型完全失败。为了解决这个问题,我们引入了一致性训练,这是一种训练过程和数据增强的替代方案,基于最大化模型在增强和未增强数据之间的预测一致性,以促进更好的分布外泛化。为此,我们开发了一种新颖的基于区域的分割损失函数,称为分割不一致损失(SIL),它考虑了增强和未增强的预测和标签对之间的差异 ...
由于医学图像普遍存在数据稀缺和数据异质性,因此使用以前的标准化方法训练有素的卷积神经网络 (CNN) 在部署到新站点时可能表现不佳。然而,真实世界临床应用的可靠模型应该能够很好地概括分布内(IND)和分布外(OOD)数据(例如, ...
在医疗应用中实现用于临床的神经网络需要网络能够检测输入数据何时与训练数据存在显着差异,以防止不可靠的预测。社区开发了多种分布外 (OOD) 检测方法,其中基于距离的方法(例如马哈拉诺比斯距离)已显示出潜力。本文挑战了社区普遍的理解,即神经网络存在一个最佳层或层组合,可应用马哈拉诺比斯距离来检测任何 OOD 模式 ...
现实世界的医学图像分割具有巨大的对象长尾复杂性,其中尾部状况与相对罕见的疾病相关并且具有临床意义。值得信赖的医疗人工智能算法应该证明其在尾部条件下的有效性,以避免在这些分配外(OOD)情况下造成临床危险的损害。在本文中,我们采用 Mask Transformers 中的对象查询概念将语义分割制定为软聚类分配 ...
实时检测分布外(OOD)样本是医疗领域机器学习模型部署的关键安全检查。尽管不确定性量化技术越来越多,但在实践中缺乏如何选择 OOD 检测方法的评估指南。这一差距阻碍了 OOD 检测方法在实际应用中的实施 ...
分布外 (OOD) 检测对于防止异常输入导致模型在部署期间失败至关重要。虽然改进的 OOD 检测方法已经出现,但它们通常依赖于最后一层的输出,并且需要对任何给定输入进行完整的前馈传递。在本文中,我们提出了一种新颖的框架,即多级分布外检测 MOOD,它利用中间分类器输出进行动态且高效的 OOD 推理 ...
以统计方式或对抗性方式检测距离训练分布足够远的测试样本是在许多现实世界的机器学习应用中部署良好分类器的基本要求。然而,众所周知,即使对于此类异常样本,具有 softmax 分类器的深度神经网络也会产生高度过度自信的后验分布。在本文中,我们提出了一种简单而有效的方法来检测任何异常样本,该方法适用于任何预训练的 softmax 神经分类器 ...