深度学习 (DL) 系统在许多应用中激增，需要专门的硬件加速器和芯片。在纳米时代，设备变得越来越容易出现永久性和暂时性故障。因此，我们需要一种有效的方法来分析先进的深度学习系统针对此类故障的恢复能力，并了解神经加速器芯片中的故障如何在深度学习应用程序级别表现为错误，其中错误可能导致不可检测和不可恢复的错误 ...
虽然机器学习算法有望实现个性化医疗，但其临床应用仍然有限。造成这种限制的一个关键因素是样本选择偏差（SSB），它是指研究人群对目标人群的代表性较差，从而导致有偏见和潜在有害的决策。尽管 SSB 在文献中广为人知，但在医疗保健机器学习领域仍然很少进行研究 ...
单调性约束是统计建模中强大的正则化器。它们可以支持计算机辅助决策的公平性，并提高数据驱动的科学模型的合理性。开创性的最小最大 (MM) 神经网络架构可确保单调性，但由于 MM 非线性的偏导数为零，因此在训练过程中经常陷入不期望的局部最优 ...
领域知识对于增强模型性能和在现实世界中做出可靠预测的重要性至关重要。这导致人们更加关注特定模型属性的可解释性。我们专注于整合单调趋势，并提出了一种新颖的基于梯度的逐点损失函数，用于通过深度神经网络强制执行部分单调性 ...
由于需要解释其预测并对其施加额外的限制，神经网络在金融和医疗保健等许多关键领域的更广泛采用受到阻碍。单调性约束是现实场景中最需要的属性之一，也是本文的重点。构建单调全连接神经网络最古老的方法之一是限制其权重的符号 ...
强化学习在生成复杂行为方面取得了巨大成功，但通常需要大量的奖励函数工程。模仿学习和逆强化学习的对抗变体提供了一种替代方案，通过判别器从专家演示中学习策略。与标准方法相比，使用判别器可以提高数据和计算效率；然而，这会导致对专家数据缺陷的敏感性 ...
现代统计学的核心问题之一是近似难以计算的概率密度。这个问题在贝叶斯统计中尤其重要，贝叶斯统计将所有关于未知量的推断框架为涉及后验密度的计算。在本文中，我们回顾了变分推理（VI），这是一种通过优化来近似概率密度的机器学习方法 ...
本文假设仅了解高斯分布，给出了扩散模型的微分方程和似然公式的直接推导。 VAE 分析可导出前向和后向随机微分方程 (SDE) 以及似然公式的非变分积分表达式。分数匹配分析得出反向扩散常微分方程 (ODE) 和一系列由噪声水平参数化的反向扩散 SDE ...
在信息搜索的学习排序中，从数据中自动学习排序模型，然后用于对搜索到的文档集进行排序。因此，理想的排名模型是从文档集到集合上的排列的映射，并且应该满足两个个关键要求：（1）〜应具有对跨交互文档建模的能力，能够在查询中捕获本地上下文信息； (2)~它应该是排列不变的，这意味着输入文档的任何排列都不会改变输出排名。前面关于学习排序的研究或设计单变量评分函数，对每个文档单独评分，未能因此对跨文档交互进行建模；或者构建按顺序对文档进行评分的多元评分函数，这无意中牺牲了排列不变性要求 ... ...
与逐点排名相比，板岩重新排名问题考虑了项目之间的相互影响，以提高电子商务中的用户满意度。以前的工作要么通过端到端模型直接对项目进行排名，要么通过权衡逐点得分和项目之间多样性的评分函数对项目进行排名。然而，目前存在两个主要挑战尚未得到充分研究：（1）由于一块石板上的项目之间存在复杂的相互影响，因此石板的评估很困难； (2) 即使给出最优评估，搜索最优板岩也具有挑战性，因为动作空间呈指数级增长 ...