强化学习(RL)在顺序决策任务中显示出令人印象深刻的结果。同时,出现了大型语言模型(LLM)和视觉模型(VLM),在多模式理解和推理方面表现出了令人印象深刻的能力。这些进步导致了将LLM和VLMS整合到RL的研究激增 ...
我们提出了 RAM-EHR,这是一种检索增强管道,用于改进电子健康记录 (EHR) 的临床预测。 RAM-EHR首先收集多个知识源,将其转换为文本格式,并使用密集检索来获取与医学概念相关的信息。该策略解决了与概念的复杂名称相关的困难 ...
大型、精心策划的网络爬虫语料库在训练语言模型 (LM) 中发挥着至关重要的作用。它们构成了几乎所有近期 LM 训练数据的大部分,例如著名的 GPT、LLaMA 和 XLM-RoBERTa 模型。然而,尽管如此重要,但人们对这些语料库的质量的关注相对较少 ...