- 名称
- Semantic-guided Search for Efficient Program Repair with Large Language Models
- 描述
在本文中,我们首先表明,即使是小型 LLM(1B-7B 参数)的光束尺寸增加也需要大量 GPU 资源消耗,导致基于 LLM 的 APR 中高达 80% 的重复崩溃是由于内存过载造成的。 。看似简单的减少内存消耗的解决方案是(1)量化LLM模型,即 ...
在本文中,我们首先表明,即使是小型 LLM(1B-7B 参数)的光束尺寸增加也需要大量 GPU 资源消耗,导致基于 LLM 的 APR 中高达 80% 的重复崩溃是由于内存过载造成的。 。看似简单的减少内存消耗的解决方案是(1)量化LLM模型,即 ...