RadLite: Multi-Task LoRA Fine-Tuning of Small Language Models for CPU-Deployable Radiology AI
为解决放射科场景算力受限、无法部署大模型的问题,作者基于 Qwen2.5-3B-Instruct 与 Qwen3-4B 这两个 3-4B 量级 SLM,用 LoRA 在 12 个公开数据集合 162K 样本、覆盖 9 项放射科任务上做多任务微调,目标是消费级 CPU 部署。结果显示:LoRA 相比零样本基线在 RADS 分类提升 53%、NLI 提升 60%、N-staging 提升 89%,两个模型在不同子任务上表现互补。
INSIGHT这篇论文为搜推团队提供「小模型 + 多任务 LoRA + CPU 部署」的完整 recipe:单一 3B-4B 主干通过 LoRA 适配多任务,权重切换零成本,可在无 GPU 节点上做行内排序、相关性判断、长尾意图识别等任务。把这种思路套用到 query 理解、内容审核、相关性判别等子模块,能显著降低 serving 成本。