变分推理使用优化而不是积分来近似贝叶斯模型中的边际似然,从而近似后验。由于过去十年计算可扩展性方面取得的进步,变分推理现在已成为许多高维模型和大型数据集的首选。本教程从主导这些最新发展的参数角度介绍变分推理,这与其他介绍性文本中常见的平均场角度形成鲜明对比 ...
这是一篇关于因子分析、概率主成分分析 (PCA)、变分推理和变分自动编码器 (VAE) 的教程和调查论文。这些紧密相关的方法是降维和生成模型。他们假设每个数据点都是由低维潜在因素生成或引起的 ...
生成模型的最新进展极大地影响了内容创建,导致个性化内容合成(PCS)的出现。通过一小组用户提供的示例,PCS 旨在根据特定的用户定义提示定制感兴趣的主题。过去两年,人们提出了 150 多种方法 ...
扩散模型已成为各个领域中新的SOTA生成建模方法,已有多个调查工作对其进行了全面的调查。随着过去几年有关扩散模型的文章数量呈指数级增长,对特定领域的扩散模型进行调查的需求也越来越大。在这项工作中,我们致力于对图扩散模型进行调查 ...
近年来,生成扩散模型通过在各种应用中显示出突破性的性能,实现了深度生成模型的快速范式转变。与此同时,结构化数据(包括表格数据和时间序列数据)尽管无处不在且应用广泛,但在深度学习研究界受到的关注相对有限。因此,与视觉和文本数据等其他数据模式相比,仍然缺乏通过扩散模型进行结构化数据建模的文献及其评论 ...
扩散模型是生成模型,它逐渐添加和去除噪声以学习训练数据的底层分布以进行数据生成。扩散模型的组成部分已经引起了人们的广泛关注,并提出了许多设计选择。现有的评论主要集中在更高级别的解决方案上,因此较少涉及组件的设计基础知识 ...
扩散模型在样本质量和训练稳定性方面超越了之前的生成模型。最近的工作表明了扩散模型在改进强化学习(RL)解决方案方面的优势。这项调查旨在提供对这一新兴领域的概述,并希望激发新的研究途径 ...
最近,文本到图像的扩散模型由于其卓越的图像生成能力而受到了社区的广泛关注。其代表车型《Stable Diffusion》发布仅两个月,用户数量就突破千万。这种流行度的激增促进了对该模型的鲁棒性和安全性的研究,从而提出了各种对抗性攻击方法 ...
视觉扩散模型彻底改变了创意人工智能领域,产生了高质量和多样化的内容。然而,他们不可避免地要记住训练图像或视频,随后在推理过程中复制他们的概念、内容或风格。这种现象引起了人们对生成输出中的隐私、安全和版权的严重担忧 ...
扩散模型 (DM) 在图像合成、文本到图像和文本引导的图像到图像生成等各种生成任务上实现了最先进的性能。然而,DM 越强大,它们的潜在危害就越大。最近的研究表明,DM 容易受到各种攻击,包括对抗性攻击、成员资格推断、后门注入和各种多模式威胁 ...