基本信息 - Retrieval meets Long Context Large Language Models

arxiv Retrieval meets Long Context Large Language Models

阅读

Star 0

名称: Retrieval meets Long Context Large Language Models

首页: https://yiyibooks.cn/arxiv/2310.03025v2/index.html

原始地址: https://arxiv.org/abs/2310.03025

描述

扩展大型语言模型 (LLM) 的上下文窗口最近越来越流行，而通过检索增强 LLM 的解决方案已经存在多年。自然的问题是：i）检索增强与长上下文窗口，哪一个更适合下游任务？ ii) 是否可以将这两种方法结合起来以获得两全其美的效果？在这项工作中，我们通过使用两个最先进的预训练 LLM 来研究这两种解决方案来回答这些问题，即 ...