MobileNetV4 - Universal Models for the Mobile Ecosystem

我们推出了最新一代的 MobileNet，称为 MobileNetV4 (MNv4)，具有适用于移动设备的通用高效架构设计。在其核心，我们引入了通用倒瓶颈（UIB）搜索块，这是一种统一且灵活的结构，融合了倒瓶颈（IB）、ConvNext、前馈网络（FFN）和新颖的额外深度（ExtraDW）变体。除了 UIB 之外，我们还推出了 Mobile MQA，这是一个专为移动加速器量身定制的注意力模块，可实现 39% 的显着加速 ...

DISC-LawLLM: Fine-tuning Large Language Models for Intelligent Legal Services

我们提出DISC-LawLLM，这是一个利用大语言模型（LLM）提供广泛法律服务的智能法律系统。我们采用法律三段论促进策略构建中国司法领域的监督微调数据集，并对具有法律推理能力的 LLM 进行微调。我们通过检索模块增强 LLM ，以增强模型访问和利用外部法律知识的能力 ...

LLaMA Pro: Progressive LLaMA with Block Expansion

人类通常会在不损害旧技能的情况下获得新技能；然而，大型语言模型 (LLM) 的情况正好相反，例如从 LLaMA 到 CodeLLaMA ...