奖励模型 (RM) 对于使大型语言模型 (LLM) 与人类偏好保持一致至关重要。他们使用偏好数据集进行训练，其中每个示例都包含一个输入提示、两个响应和一个偏好标签。由于构建高质量的人类标记偏好数据集既耗时又昂贵，人们通常依赖现有强大的 LLM 来生成偏好标签 ...
在这项工作中，我们证明，可以通过基于扩张的时间卷积在2D关键点上的扩张时间卷积来有效地估算视频中的3D姿势。我们还介绍了一种简单有效的半监督训练方法，该方法利用了未标记的视频数据。我们从未标记的视频预测的2D关键点开始，然后估算3D姿势，最后回到输入2D关键点 ...
类人动物的近亲在演示和收集复杂的类人形景相互作用的数据中起着至关重要的作用。但是，当前的远程操作系统面临着关键的局限性：它们将上半身控制和下半身控制脱致以保持稳定性，限制自然协调并在没有实时位置反馈的情况下操作开环，从而导致累积的漂移。基本的挑战是在延长的持续时间内实现精确的，协调的全身远程运行，同时保持准确的全球定位 ...
大型语言模型已被证明可以在各种自然语言处理问题上表现良好。但是，随着模型大小和输入序列的长度的增加，KV缓存的迅速增加显着降低了推理速度。因此，GQA模型是MHA模型的替代方法，已被广泛引入LLMS ...
我们提出了塔罗牌，塔罗牌是一个以最佳运输理论为基础的目标数据选择框架。先前的目标数据选择方法主要依赖于基于影响力的贪婪启发式方法来增强特定领域的性能。虽然对有限的单峰数据有效（i ...
我们介绍了Chexgenbench，这是一个严格且多方面的评估框架，用于合成胸部X光片生成，同时评估了最先进的文本对图像生成模型的保真度，隐私风险和临床实用性。尽管用于现实世界图像的生成AI的快速发展，但医学领域的评估受到方法论上的不一致，过时的结构比较和断开评估标准的阻碍，这些评估标准很少解决合成样本的实际临床价值。 Chexgenbench通过标准化的数据分配和一个统一的评估协议来克服这些局限性，其中包括20个定量指标，这些定量指标可以系统地分析发电质量，潜在的隐私脆弱性以及在11个领先的文本形象到图像架构中的下游临床适用性 ...
传统的搜索引擎难以合成零散的信息以获取复杂的查询，而生成的AI搜索引擎面临着相关性，全面性和呈现方面的挑战。为了解决这些局限性，我们介绍了Xinyu AI搜索，这是一个新型系统，该系统结合了查询分解图，以动态地将复杂的查询分解为子征服，从而逐步检索和生成。我们的检索管道通过多源集合和查询扩展增强了多样性，同时过滤和重新排序策略优化了通过相关性 ...
现有的基准已被证明可有效评估受过全面训练的大语言模型的性能。但是，我们发现在小型模型的早期训练阶段存在明显的差异，基准通常无法提供有意义或歧视性的信号。为了探讨这些差异是如何出现的，这项竞赛解决了设计科学知识评估任务的挑战，专门针对衡量语言模型的早期培训进度量身定制 ...
由于结构差距以及话语和逻辑形式之间的语义差距，语义解析具有挑战性。在本文中，我们提出了一种无监督的语义解析方法 - 同步语义解码（SSD），该方法可以通过共同利用释义和语法约束解码来同时解决语义差距和结构间隙。具体而言，我们将语义解析重新制定为一个受约束的释义问题：鉴于话语，我们的模型同步产生了其规范的话语和意义表示 ...
尽管数据综合和蒸馏是增强小语言模型的有希望的策略，但当前的方法在很大程度上依赖大型语言模型（LLMS），这些模型（LLMS）遭受了高度计算成本，环境效率低下以及从整体体系结构继承的潜在偏见。相比之下，较小的LLM更容易访问和可持续，但是它们的个人能力通常在产生高质量，多样化和可靠的数据方面缺乏。受人类协作过程的启发（e ...