arxiv Unlocking Continual Learning Abilities in Language Models

阅 读

Star 0
名称
Unlocking Continual Learning Abilities in Language Models
首页
https://yiyibooks.cn/arxiv/2406.17245v2/index.html
原始地址
https://arxiv.org/abs/2406.17245
描述
语言模型 (LM) 表现出令人印象深刻的性能和泛化能力。然而，LM 一直在与灾难性遗忘的持续挑战作斗争，这损害了他们持续学习（CL）的长期可持续性。现有的方法通常通过将旧的任务数据或任务方面的归纳偏差合并到 LM 中来解决这个问题 ...