arxiv OLMo: Accelerating the Science of Language Models

名称
OLMo: Accelerating the Science of Language Models
首页
https://yiyibooks.cn/arxiv/2402.00838v3/index.html
原始地址
https://arxiv.org/html/2402.00838v3
描述
语言模型 (LM) 在 NLP 研究和商业产品中已经变得无处不在。随着其商业重要性的飙升,最强大的模型已被封闭,被封闭在专有接口后面,其训练数据、架构和开发的重要细节均未公开。考虑到这些细节在科学研究这些模型中的重要性,包括它们的偏差和潜在风险,我们认为研究界有必要获得强大的、真正开放的 LM ...