扩散模型(DMS)由于具有强大的数据分布和生成高质量项目的能力而成为顺序推荐的有希望的方法。现有工作通常会在下一个项目中添加噪音,并逐渐将其在用户的交互序列引导下,从而生成与用户兴趣紧密相符的项目。但是,我们在此范式中确定了两个关键问题 ...
连续推荐系统利用 Transformer 体系结构证明了捕获用户行为模式的非凡功能。这些系统的核心是构建有效项目表示形式的关键挑战。传统方法通过简单的串联或基本神经体系结构采用特征融合来创建统一表示序列 ...
数据增强已成为一种有前途的方法,可以在顺序建议中减轻数据稀疏性。现有方法在模型培训期间生成了新的有效的数据以提高性能。但是,部署它们需要重新训练,修改或引入其他可学习的参数 ...
用户行为序列建模从丰富的历史互动中捕捉到用户的兴趣,这对于工业推荐系统来说至关重要。尽管排名阶段模型的突破能够利用长度扩展多达数千个长度的超长行为序列,但由于两个主要挑战,现有的检索模型仍被限制在数百个行为的序列上。一个是实时服务对大规模候选池施加的严格延迟预算 ...
与大多数常规建议问题不同,顺序建议通过利用相互作用的项目之间的内部顺序和依赖性来关注学习用户的偏好,这已经受到了研究人员和从业者的极大关注。近年来,我们目睹了这一领域取得的巨大进步和成就,需要进行新的调查。在这项调查中,我们从新的角度研究了SR问题(i ...
提出了当前的顺序推荐系统,以通过各种神经技术(例如 Transformer 和图形神经网络(GNN))来解决动态用户偏好学习。但是,从高度稀疏的用户行为数据中的推断可能会妨碍顺序模式编码的表示能力。为了解决标签短缺问题,最近提出了对比度学习(CL)方法,以在两个时尚中执行数据增强:(i)随机损坏序列数据(e ...
通过从增强视图中合并自我监督的信号,对比度学习已在培训顺序推荐模型中有效。大多数现有方法通过随机数据增强从相同的交互序列产生多个视图,旨在使其在嵌入空间中的表示形式对齐。但是,用户通常在购买商品时具有特定意图(e ...
扩散模型已通过将离散文本映射到连续空间中成功地适应了文本生成任务。但是,由于推理过程中没有前进过程,训练和推理之间存在不可忽略的差距。因此,该模型仅根据先前生成的反向噪声而不是前向过程计算的噪声进行预测 ...
扩散模型在产生高质量的文本序列方面已获得突出。然而,当前的方法主要代表连续扩散空间内的离散文本,这在训练过程中会产生大量的计算开销,并导致采样速度较慢。在本文中,我们引入了一种软吸收状态,该状态促进了基于基础高斯空间重建离散突变的扩散模型,从而增强了其恢复条件信号的能力 ...
最近,扩散模型已成为生成模型的新范式。尽管使用诸如视觉和音频之类的连续信号在域上取得了成功,但由于文本的离散性质,尤其是对于有条件的生成,将扩散模型适应自然语言的探索却没有探索。我们通过提出扩散模型来应对这一挑战,该模型是为序列到序列(SEQ2SEQ)文本生成任务而设计的 ...