人工智能（AI）的最新进展已经产生了高度强大且可控制的系统。这为结构化推理以及多个AI系统和人类之间的协作创造了前所未有的机会。为了充分发挥这种潜力，必须开发一种设计和研究这种结构化相互作用的原则方法 ...
大语言模型（LLM）应用的激增引起了人们对误导或捏造信息的产生（称为幻觉）的担忧。因此，检测幻觉对于维持对LLM生成的内容的信任至关重要。学习真实分类器的主要挑战是缺乏大量标记的真实和幻觉的数据 ...
本地多模式大型语言模型（MLLM）将单个大语言模型（LLM）重组成能够语音和文本生成的口语模型（SLM）。与模块化和对齐的MLLM相比，本机MLLM保留了更丰富的副语言特征，例如情感和韵律，并直接在主干LLM中产生语音响应，而不是使用单独的语音解码器。这种整合还导致响应潜伏期较低，相互作用更平滑 ...
基于 Token 的语言建模是语音产生的一种突出方法，在该方法中，通过量化自我监管学习（SSL）模型（SSL）模型的特征并从神经语音编解码器中提取代码，通常称为语义 Token 和声音 Token 。这些 Token 通常是自动加压建模的，推理速度受 Token 速率的约束。 In this work, we propose DiffSoundStream, a solution that improves the efficiency of speech tokenization in non-streaming scenarios through two techniques: (1) conditioning the neural codec on semantic tokens to minimize redundancy between semantic and acoustic tokens, and (2) leveraging latent diffusion models to synthesize high-quality waveforms from semantic and coarse-level acoustic tokens. ...
在社交媒体推荐系统中，终身顺序建模（LSM）变得越来越重要，以预测向用户提供的项目的点击率（CTR）。此过程的核心是注意机制，它从用户序列中提取有关候选项目的兴趣表示。通常，注意机制以一种重点的方式运行，仅关注序列中各个项目与候选项目的相关性 ...
扩散模型的最新进展已使高质量的视频生成，但是额外的时间维度显着提高了计算成本，从而使长期视频的培训和推断非常昂贵。在本文中，我们确定了一种现象，我们在视频扩散模型中称呼时空能量衰减：随着 Token 之间的空间和时间距离增加，类似于自然界和时间上的信号衰减或自然界时间的物理衰减，柔软后的注意力评分会降低。在此激励的情况下，我们提出了径向关注，这是一种具有$ O（n \ log n）$复杂性的可扩展稀疏注意机制，它将能量衰减转化为指数衰减的计算密度，比标准$ O（N^2）$密集的注意力和表达性更高的效率要高得多 ...
自动唇部阅读（ALR）的目的是从视频中捕获的扬声器的无声唇部运动中自动转录口头内容。当前主流唇读方法仅使用单个视觉编码器来建模单个刻度的输入视频。在本文中，我们建议通过合并多尺度视频数据和多编码器来增强口头阅读 ...
在本报告中，我们介绍了QWEN2.5，这是一系列旨在满足各种需求的大型语言模型（LLMS）。与以前的迭代相比，QWEN 2 ...
大语言模型（LLMS）的训练后量化（PTQ）具有减少推理时降低过度计算成本的希望。由于激活中极端异常值引起的高量化误差，对所有重量，激活和键值（KV）缓存张量的量子不显着降低是有挑战性的。为了解决这个问题，我们提出了RESQ，RESQ是一种PTQ方法，可以进一步推动最先进的方法 ...
在在线数字广告领域中，转换率（CVR）预测在最大化每次转换成本（CPA）模型下的收入中起着关键作用，在这些模型下，只有在用户完成特定的操作（例如进行购买）时，广告客户只会收取广告客户的费用。 CVR预测中的一个主要挑战在于延迟的反馈问题会议可能会发生数小时甚至在初次用户互动后数小时。这种延迟使模型训练复杂化，因为最近的数据可能不完整，导致偏见和性能下降 ...