大型语言模型（LLM）表现出强大的解决问题的能力，尤其是在多机构系统中组织的。但是，此类系统的出现也提出了一些有关复杂代理网络有效自我组织和协作的能力的问题。虽然测量标准推理基准的性能表明多代理系统能够解决推理任务的能力，但尚不清楚这些系统是否能够有效利用其拓扑 ...
最近的研究利用大型语言模型多代理系统进行复杂的问题解决，同时试图减少构建它们所需的手动努力，从而推动自动化代理工作流优化方法的开发。但是，由于代表性限制，缺乏适应性和依赖离散优化技术的可扩展性，现有方法仍然不灵活。我们通过ScoreFlow解决这些挑战，ScoreFlow是一个简单而高性能的框架，利用了连续空间中有效的基于梯度的优化 ...
在本文中，我们开发了一种知识辅助的深入增强学习（DRL）算法，以设计具有时间敏感性流量的第五代（5G）蜂窝网络中的无线调度程序。由于调度策略是从渠道和队列状态到调度措施的确定性映射，因此可以通过使用深层确定性策略梯度（DDPG）进行优化。我们表明，DDPG的直接实现缓慢地收敛，服务质量（QoS）的性能较差，并且不能在实际上是非平稳的现实5G系统中实施 ...
我们推出 SWE-Gym，这是第一个用于培训现实世界软件工程 (SWE) 代理的环境。 SWE-Gym 包含 2,438 个真实的 Python 任务实例，每个实例都包含一个具有可执行运行时环境、单元测试和以自然语言指定的任务的代码库。我们使用 SWE-Gym 来训练基于语言模型的 SWE 代理，在流行的 SWE-Bench Verified 和 Lite 测试集上实现了高达 19% 的解决率绝对增益 ...
大型语言模型（LLM）的最新进展激发了人们对扩大建议系统的兴趣，但仍然存在两个实际障碍。首先，对工业推荐人的培训和服务成本必须尊重严格的延迟范围和较高的QPS需求。其次，排名模型中的大多数人设计的特征跨模块是从CPU时代继承的，无法利用现代GPU，导致模型差较低的利用率（MFU）和较差的可扩展性 ...
转移学习的目的是通过转移不同但相关的源域中的知识来提高目标学习者在目标领域的表现。这样，可以减少对构建目标学习者的大量目标域数据的依赖性。由于应用程序的广泛前景，转移学习已成为机器学习中一个流行而有希望的领域 ...
最近，在大型多模型（LMMS）中，内部文化学习（ICL）已成为一种重要的推理范式，利用一些内部文化演示（ICD）来提示LMMS完成新任务。但是，多模式数据中的协同作用增加了ICL性能对ICD的配置的敏感性，从而刺激了对更稳定和一般的映射函数的需求。从数学上讲，在基于 Transformer 的模型中，ICD充当了添加到查询 Token 隐藏状态中的“换档向量” ...
以人为中心的计算机视觉的最新技术在各种任务中实现了高度准确性和鲁棒性。该领域中最有效的模型具有数十亿个参数，因此需要非常大的数据集，昂贵的培训制度和计算密集型推断。在本文中，我们证明可以在较小但高的合成数据集上训练模型，而准确性和效率较高，则可以训练模型 ...
多机构系统（MAS）已成为精心策划大型语言模型（LLM）和专门解决复杂任务的专业工具的强大范式。但是，现有的MAS框架通常需要手动工作流程配置，并且缺乏对动态演化和性能优化的本地支持。此外，许多MAS优化算法未集成到统一框架中 ...
程序合成或代码生成旨在生成满足问题规范的程序。使用大规模预处理的语言模型（LMS）的最新方法显示出令人鼓舞的结果，但它们有一些关键局限性。特别是，他们经常遵循标准监督的微调程序，仅从对自然语言问题描述和基础真相计划对培训代码生成模型 ...