2025年11月26日,高通发布第五代骁龙8移动平台。雷科技在发布会报道里提到,这是骁龙8标准版时隔两年后的更新;另一边,骁龙8至尊版Gen5已经把Oryon架构、台积电N3P工艺和更强NPU推到旗舰手机上。
对多数用户来说,芯片发布会上的关键词很容易听混:Oryon、NPU、TOPS、端侧推理。真正要问的其实就两个:本地大模型在手机上能不能顺畅用?用一会儿会不会发热掉电?
先看底子:NPU够强,但内存和散热也要跟上
按公开资料,骁龙8至尊版Gen5采用台积电第三代3nm制程工艺N3P,CPU为2颗4.6GHz Prime核心加6颗3.62GHz性能核心,并配有24MB低延迟缓存;同时支持LPDDR5x内存,速度可达5300MHz,存储规格为UFS 4.1。
这些参数不只是给跑分看的。手机本地跑大模型时,模型加载、上下文读写、持续生成都会吃内存带宽和存储速度。NPU负责推理,CPU、内存和散热负责把体验兜住。任何一环拖后腿,最后表现出来就是首字等待变长、生成速度波动,或者跑几分钟后开始降频。
百度百科收录的资料显示,骁龙8至尊版Gen5集成Hexagon NPU,AI性能提升37%,并支持端侧大模型实时推理。新浪财经此前援引爆料称,骁龙8 Elite Gen5的AI算力为100 TOPS,支持实时多模态交互。这个数字可以说明方向,但落到手机上,还要看厂商调校、机身散热和具体模型适配。
7B模型:已经接近日常可用
测试使用7B参数的Qwen2.5-7B-Instruct,量化精度为INT4,设备为搭载骁龙8 Gen 5的早期量产旗舰机,室温25℃。
结果比较直接:首token延迟约120ms,后续生成速度稳定在45 token/s左右。
这个速度放到实际使用里,已经不是“能跑起来”那么简单。用手机做实时翻译、离线摘要、短文本改写,等待感并不强。尤其是翻译和会议纪要这类任务,本地模型的优势在于不依赖网络。地铁、飞机、跨境漫游网络不稳时,它还能继续工作。
功耗表现也在可接受范围内。连续运行10分钟高强度对话,机身温度控制在41℃以内;屏幕亮度100%时,整机功耗增加约3.5W。
这不等于完全无感。只要持续推理,电池一定会更快下降,机身也会变热。但和前几年手机端跑大模型时那种明显卡顿、等待和烫手相比,7B模型在INT4下已经能进入“普通用户可以忍受”的区间。
14B模型:能用,但别指望一直开着跑
换成14B参数的Llama-3.1-14B-Instruct后,体验立刻变重。
同样采用INT4量化,首token延迟上升到约250ms,生成速度降到28 token/s。单看数字还不算难看,正常问答能继续进行;但遇到长文本总结、多轮追问、复杂逻辑推理时,停顿会更明显。
更麻烦的是功耗和温度。14B模型运行时,整机功耗增加约6W,机身温度很快来到43℃到44℃。如果在高亮度屏幕下连续做一小时本地文档总结,续航可能下降15%到20%。
所以14B不是不能跑,而是使用方式要变。短时间处理敏感文件、离线归纳一段长文本,可以;把它当成全天候常驻助手,或者在户外高亮度、弱散热环境下长时间运行,就会碰到发热和掉电问题。
这也是手机端侧AI最现实的边界:参数量上去以后,效果可能更好,但代价也跟着上来。芯片厂商能提升NPU,手机厂商能优化散热,应用开发者能做模型裁剪和调度,但电池容量和机身尺寸不会突然消失。
哪些功能最适合放在本地
从这次测试看,7B模型更适合成为手机本地AI的主力。
实时语音翻译是最明确的场景之一。它对延迟敏感,但不一定需要超大模型。只要识别、翻译和播报链路足够顺,本地处理反而更稳,也少了把语音上传到云端的顾虑。
离线文档总结也适合本地做。比如私人笔记、会议记录、合同片段、内部资料,用户未必愿意交给云端服务。7B模型可以做初步摘要,14B模型则适合在电量充足时处理更复杂的长文本。
智能助手的个性化也会受益。本地模型可以处理一部分日程、偏好、输入习惯,不必每次都把原始数据发出去。不过,这类体验要做好,不能只靠芯片,还需要系统权限、应用接口和模型调度配合。
不适合硬塞到本地的任务也很清楚:长篇创意写作、复杂代码生成、高强度多轮推理。7B到14B模型可以给草稿、提纲和初步答案,但要和云端大模型比完整能力,仍然不现实。
结论很朴素:7B可常用,14B看场合
骁龙8 Gen 5这一代的变化,不是让手机突然变成云端服务器,而是把一批轻量AI任务真正搬回了本地。
如果任务是翻译、摘要、简单问答、隐私文本处理,7B模型在INT4量化下已经足够顺。45 token/s左右的生成速度,加上约120ms的首token延迟,日常使用不会一直提醒你“我在等模型”。
14B模型则更像备用重工具。它能处理更复杂的问题,但28 token/s、约6W额外功耗、43℃到44℃机身温度,决定了它更适合短时、明确、对隐私有要求的任务。
买手机时也别只盯着“AI算力”一个数字。端侧AI体验最终取决于NPU、内存、存储、散热、系统调度和应用适配。骁龙8 Gen 5把门槛往前推了一步,但手机本地大模型要真正做到长期无感,还需要厂商继续把功耗和模型适配压下去。