Large Language Models (LLMs) have become an essential infrastructure for Artificial General Intelligence (AGI), yet their lack of well-defined memory management systems hinders the development of long-context reasoning, continual personalization, and knowledge this http URL models mainly rely on static parameters and short-lived contextual states, limiting their ability to track user preferences or update knowledge over extended this http URL Retrieval-Augmented Generation (RAG)在纯文本中介绍了外部知识，它仍然是一种无状态的解决方法，而没有生命周期控制或与持续存在的集成此HTTP URL工作已经从内存层次结构的角度对LLM的培训和推理成本进行了建模，这表明这表明引入了参数内存之间的显式记忆层，并且可以通过外部化特定的特定特定的特定知识来大大降低这些成本。除了计算效率之外，LLMS还面临着更广泛的挑战，这些挑战是如何在时间和上下文中分布的方式，需要能够管理跨越不同时间尺度和来源的异质知识的系统。为了应对这一挑战，我们提出了备忘录，这是一种将内存视为可管理系统资源的内存操作系统 ...
人工智能（AI）在许多领域取得了巨大的成功，自AI黎明以来，AI被广泛认为是其海滩头。近年来，关于游戏AI的研究已从相对简单的环境中逐渐发展（例如 ...
最近的工作表明，训练损失量表是具有模型大小和 Token 数量的功率定律，并且实现Comperute-Timal模型需要缩放模型大小和 Token 数量。但是，这些缩放定律假设数据的无限供应，并主要应用于计算结合的设置。随着现代大型语言模型越来越依赖于大规模的互联网规模数据集，假设它们正在计算的假设变得越来越少 ...
扩散模型在现实世界视频超分辨率（VSR）中表现出了有希望的性能。但是，他们需要的数十个采样步骤使推理非常慢。采样加速技术，尤其是单步，提供了潜在的解决方案 ...
善解人意的互动是人机交流的基石，因为需要理解具有副语言提示并产生情感和表现力的反应的言语。但是，最强大的同情LSLM越来越封闭，研究人员将有关建筑，数据和发展不透明的关键细节留给研究人员。鉴于对LSLM和同理心行为进行透明研究的批判性需要，我们提出了OpenS2S，这是一种完全开放源，透明和端到端LSLM，旨在实现促进性语音相互作用 ...
最近，大型的预训练的语言模型已扩展并应用于具有巨大成功的编程语言任务，通常是通过进一步预先培训严格的自然语言模型 - 培训序列通常包含自然和（线性化的）编程语言。这种方法有效地将序列的两种方式都映射到相同的嵌入空间中。但是，编程语言关键字（e ...
现代医疗图像注册方法可以使用深网预测变形。这些方法达到了最新的（SOTA）注册精度，并且通常很快。但是，与常规的非深度学习方法相比，深度学习（DL）方法是解剖学特定的 ...
大型语言模型（LLMS）的最新进展揭示了封闭源和开源模型之间存在显着的性能差距，尤其是在需要复杂的推理和精确指导之后的任务中。本文介绍了Reason Bridge，这种方法可以通过新型的层次结构知识蒸馏框架有效地将推理能力从强大的封闭源转移到开源模型。我们开发了一个量身定制的数据集Reason1K，只有1,000个精心策划的推理轨迹强调了难度，多样性和质量 ...
从高维顺序数据中提取有意义的潜在表示是机器学习的至关重要挑战，其应用程序涵盖了自然科学和工程。我们介绍了InfoDPCCA，这是一种动态概率的规范相关分析（CCA）框架，旨在模拟两个相互依存的观测序列。 InfoDPCCA利用一个新型的信息理论目标来提取共享的潜在表示，该图表捕获数据流和平衡表示压缩和预测充足性之间的相互结构，同时还学习了分别编码针对每个序列特定信息的潜在组件 ...
捕获准确的声学现象的现实音频综合对于在虚拟和增强现实中创造沉浸式体验至关重要。综合在任何位置接收的声音都取决于脉冲响应（IR）的估计，该响应（ir）的特征是在到达听众的位置之前，声音在一个场景中沿着不同的路径传播。在本文中，我们提出了声学量渲染（AVR），这是一种新型方法，可适应体积渲染技术，以模拟声学脉冲响应 ...