知识图嵌入(KGE)技术对于学习知识图中实体和关系的紧凑表示至关重要,有助于高效推理和知识发现。虽然现有方法通常侧重于仅基于图结构训练 KGE 模型,或使用 KG 中的分类数据微调预训练的语言模型,但 KG-FIT 利用 LLM 引导的细化来构建实体集群的语义连贯的层次结构。通过在微调过程中将这种分层知识与文本信息结合起来,KG-FIT 有效地捕获了来自 LLM 的全局语义和来自 KG 的局部语义 ...
语言模型在对话生成任务上取得了令人印象深刻的表现。然而,当需要事实知识的对话生成响应时,由于在生成的响应中检索、编码和反映知识的机制缺乏,它们远非完美。一些基于知识的对话生成方法通过利用知识图谱(KG)中的事实来解决这个问题;然而,他们不保证模型利用知识图谱中的相关知识... ...
作为人工智能领域最先进的技术之一,检索增强生成(RAG)技术可以提供可靠且最新的外部知识,为众多任务提供巨大便利。特别是在人工智能生成内容(AIGC)时代,RAG 强大的检索能力可以提供额外的知识,使得检索增强生成能够协助现有的生成式人工智能产生高质量的输出。最近,大型语言模型(LLM)在语言理解和生成方面表现出了革命性的能力,但仍然面临着固有的局限性,例如幻觉和过时的内部知识 ...
最近,思想链(CoT)提示在复杂的推理任务上取得了成功,其是设计一个简单的提示,例如“让我们一步一步思考”或多个提出设计理由的上下文示例,以引发大量的推理。用于生成中间推理步骤的语言模型(LLM)。然而,生成的推理经常存在错误,形成不事实和不真实的推理链。为了增强这种脆弱性,我们提出了一种新颖的知识链(CoK)提示,旨在引导LLM以结构三元组的形式生成明确的知识证据...... ...
关于最近信息检索的许多研究都集中在如何从一个任务(通常具有丰富的监督数据)转移到监督有限的各种其他任务,并隐含假设可以从一个任务推广到所有其他任务。这忽略了这样一个事实:存在许多多样化且独特的检索任务,每个任务都针对不同的搜索意图、查询和搜索领域。在本文中,我们建议进行少样本密集检索,在这种设置中,每个任务都带有一些描述和一些示例...... ...
军事行动中行动方针(COA)的制定传统上是一个耗时且复杂的过程。为了解决这一挑战,本研究引入了 COA-GPT,这是一种采用大型语言模型 (LLM) 快速高效生成有效 COA 的新颖算法。 COA-GPT 通过情境学习将军事理论和领域专业知识融入 LLM ,允许指挥官以文本和图像格式输入任务信息,并接收战略一致的 COA 进行审查和批准 ...
视觉关系知识图(KG)是一种多关系图,其实体与图像相关联。我们探索新颖的机器学习方法来回答网络提取的知识图中的视觉关系查询。为此,我们创建了 ImageGraph,一个包含 1,330 个关系类型、14,870 个实体和从网络爬取的 829,931 张图像的知识图谱 ...
我们提出了 MMKG,这是三个知识图的集合,其中包含所有实体的数字特征和图像(链接)以及 KG 对之间的实体对齐。因此,多关系链接预测和实体匹配社区可以从该资源中受益。我们相信该数据集有潜力促进知识图谱新型多模式学习方法的开发 ...
虽然大型语言模型 (LLM) 在自然语言处理方面表现出了卓越的能力,但它们在处理涉及知识图 (KG) 的复杂、多步骤推理任务时遇到了困难。集成 LLM 和 KG 的现有方法要么没有充分利用 LLM 的推理能力,要么由于紧密耦合而遭受过高的计算成本。为了解决这些限制,我们提出了一种名为 EffiQA 的新型协作框架,它可以通过迭代范式在性能和效率之间取得平衡 ...