知识图(KG)在跨专业领域的知识密集型任务中发挥着关键作用,其中获取精确可靠的知识至关重要。然而,现有的知识图谱构建方法严重依赖人工干预来获得合格的知识图谱,这严重阻碍了在现实场景中的实际适用性。为了应对这一挑战,我们提出了一个通用的知识图谱构建框架,名为 SAC-KG,利用大型语言模型(LLM)作为领域知识图的熟练自动构造器 ...
现有的大型语言模型(LLM)基于检索的推理方法严重依赖非参数知识源的密度和质量来提供领域知识和显式推理链。然而,包容性的知识源价格昂贵,有时无法为科学或角落领域构建。为了应对这些挑战,我们引入了图启发准确性外推法(GIVE),这是一种新颖的推理框架,它集成了参数和非参数记忆,以增强非常稀疏的知识图上的知识检索和忠实推理过程 ...
知识图谱已经引起了广泛的研究关注,并被广泛用于增强下游应用。然而,目前大多数研究主要集中在静态知识图谱上,其事实不随时间变化,而忽视了它们随时间的动态演化。因此,时间知识图引起了更多的关注,因为大量的结构化知识只存在于特定的时期内 ...
扩展模型大小对大型语言模型 (LLM) 的部署和推理提出了巨大挑战。由于 LLM 权重的冗余,最近的研究重点是将仅权重量化推向极低位(甚至低至 2 位)。它降低了内存需求,优化了存储成本,并降低了推理过程中的内存带宽需求 ...
为了增强现成的大型语言模型(LLM)的推理能力,我们引入了一种简单但通用且有效的提示方法,Re2,即 \textbf{Re}-\textbf{Re}ading 问题作为输入 ...
数据集大小的快速增长刺激了语音技术的发展。传统的语音模型通常依赖于大量标记的训练数据,这对于资源匮乏的语言来说是稀缺的。本文介绍了 GigaSpeech 2,一个大规模、多领域、多语言的语音识别语料库 ...
软件工程是一个以复杂的决策过程为特征的领域,通常依赖于细致入微的直觉和咨询。深度学习的最新进展已经开始通过在软件开发的各个阶段实施的精心设计来彻底改变软件工程实践。在本文中,我们提出了一种创新范例,在整个软件开发过程中利用大型语言模型(LLM),通过自然语言通信简化和统一关键流程,从而消除每个阶段对专用模型的需求 ...
机器翻译 (MT) 的最新进展显着提高了各个领域的翻译质量。然而,由于其复杂的语言、比喻表达和文化差异,文学文本的翻译仍然是一个艰巨的挑战。在这项工作中,我们引入了一种基于大型语言模型(LLM)的文学翻译新颖的多代理框架,由一家名为 TransAgents 的公司实施,该框架通过利用多个代理的集体能力来反映传统的翻译出版流程,以解决复杂的翻译问题。文学作品翻译的要求 ...
目的:开发一种高通量生物医学关系提取系统,以可扩展和证据的方式利用大语言模型(LLM)的阅读理解能力和生物医学世界知识。方法:我们将关系提取任务制定为大型语言模型的二元分类。具体来说, LLM 根据外部语料库及其世界知识做出决定,给出判断的理由进行事实验证 ...
领先的全球海洋预报系统(GOFS)使用物理驱动的数值预报模型,通过昂贵的计算来求解偏微分方程。最近,特别是在大气天气预报中,数据驱动模型已显示出将环境预报速度提高几个数量级的巨大潜力,但仍然没有数据驱动的 GOFS 与数值 GOFS 的预测精度相匹配。在本文中,我们提出了第一个数据驱动的1/12°分辨率全球海洋涡旋分辨预报模型“羲和”,该模型是根据法国墨卡托海洋国际公司25年的每日GLORYS12再分析数据建立的 ...