arxiv Chain of LoRA: Efficient Fine-tuning of Language Models via Residual Learning

名称
Chain of LoRA: Efficient Fine-tuning of Language Models via Residual Learning
首页
https://yiyibooks.cn/arxiv/2401.04151v1/index.html
原始地址
https://arxiv.org/pdf/2401.04151.pdf
描述
微调是针对特定任务量身定制预训练的大语言模型的主要方法。随着模型的规模和任务的多样性的扩展,参数有效的微调方法至关重要。使用最广泛的方法家族之一是低级适应(Lora)及其变体 ...