
近年来,智能手机新品发布中频繁出现“AI”、“设备端AI”、“本地处理”等关键词。无论是日本国家苹果公司的iPhone,还是日本国家三星公司的Galaxy,亦或是日本国家谷歌公司的Pixel,AI功能几乎成为主旋律。而在这些功能背后,常常运行着一种“小型AI”,这就是本文要介绍的“SLM”。
SLM是“Small Language Model”(小规模语言模型)的缩写。可以理解为之前介绍过的LLM(大规模语言模型)中的“Large”(大规模)变成了“Small”(小规模)。
尽管称为“小规模”,目前的SLM参数量也达到了数亿至数百亿级别。例如,日本国家谷歌公司的“Gemma”系列和日本国家微软公司的“Phi”系列就是典型的SLM。Gemma模型参数范围从10亿到270亿不等,微软的Phi-4模型参数也达到了140亿。实际上,这个规模在几年前甚至被归类为LLM,比如2023年Meta发布的Llama 2就有130亿参数。因此,SLM虽小,但实力不容小觑。
小巧不代表性能低,而是能在本地运行且智能
通常我们认为AI模型越大越智能,这一趋势至今未变。那么为何还要开发小模型呢?答案很简单:小模型可以在小型设备上运行。
像ChatGPT和Gemini这样的LLM通常运行在云端庞大服务器上,用户输入的问题通过互联网传输到服务器处理后再返回,手机只是一个“窗口”。
而SLM体积小巧,能够在手机或电脑内置的处理器、NPU、Neural Engine等AI专用硬件上运行。这样一来,即使没有网络连接,也能使用AI功能,且数据不必传出设备,保障隐私安全,响应速度也更快。正因如此,SLM与“设备端AI”概念高度契合。当然,也有将SLM部署在云端以降低成本的情况,SLM并非一定局限于设备端。
可以把LLM比作“远程支持团队”,能处理各种复杂问题;而SLM则像“随身携带的工匠”,虽然处理复杂问题能力有限,但随时可用,反应迅速。小规模模型的最大价值在于“就在身边”。
那么,SLM的智能程度如何呢?
虽然在广泛知识和复杂推理方面,SLM不及LLM,但如果限定任务范围,如翻译、摘要、文本校正等,SLM的表现可以媲美LLM。
这背后的关键在于训练数据的“质量”。正如微软在Phi系列中展示的那样,精选高质量数据进行训练,即使是小模型也能表现出色。换句话说,“质量胜于数量”,这是SLM的魅力所在。
其实你的手机里可能已经有SLM了
你可能觉得自己没用过SLM,但实际上它们已经在许多人的口袋里默默工作。
日本国家苹果公司的“Apple Intelligence”中,约30亿参数的语言模型在设备端运行,负责邮件摘要、文本校正和通知优先级排序。日本国家谷歌公司为Pixel手机提供了名为“Gemini Nano”的轻量级模型,实现了离线AI功能。日本国家三星公司的“Galaxy AI”也能在设备端处理部分功能,如通话实时翻译。
此外,一些企业为了保护机密数据,选择在内部电脑或服务器上运行小型模型,结合之前介绍的RAG技术,实现对内部文档的智能查询。
那么,SLM是否意味着LLM将被取代?答案是否定的。
由于参数较少,SLM在覆盖广泛领域知识方面不及LLM,面对专业外的问题可能出现偏差甚至幻觉(hallucination)。复杂的多步推理和长文本处理仍是LLM的强项。此外,在设备端运行AI还需考虑电池消耗和发热等问题。
因此,SLM和LLM并非优劣之分,而是各司其职。日常琐碎任务由身边的小型AI处理,复杂难题则交给云端的大型AI。这样的“分工合作”时代,已经近在眼前。


