< img id="wx_img" src="https://www.qbitai.com/wp-content/uploads/imgs/qbitai-logo-1.png" width="400" height="400">
iPhone断网跑35B多模态!国产开源新模型,只占3G内存
十三
2026-10-14
04:55:15
来源:
量子位
面壁开源MiniCPM-V 4.7
金磊 发自 凹非寺
量子位 | 公众号 QbitAI
什么?
35B
的
MoE
,在
手机
上也能跑得很丝滑?
Yeah~It’s true.
我们直接在
断网
状态下,给
iPhone 17 Pro Max
手机上传一张数据可视化经典图——拿破仑远征俄国失败的行军路线图:
然后我们直接提问:
图里记录的最低气温是多少摄氏度,出现在哪一天,换算过程顺带讲一下。
可以看到,不到1分钟的时间,苹果手机上的模型,就从那条线上找到了零下30度的标注,判断出日期是1812年12月6日,再按1列氏度等于1.25摄氏度换算,给出了零下37.5摄氏度的答案。
而且啊,这个手机上的模型的速度,
还能更快
。
例如同一张路边停车标志的照片、同一个停车时间的问题,左边是没做优化的35B模型,右边是优化过后的模型:
可以看到,没优化的时候,速度每秒大概2个Token;但在优化之后,速度达到了每秒8-12个Token。即便是在断网状态下,答案也是唰唰唰地往外蹦。
据了解,这个35B模型在iPhone 17 Pro Max上的解码速度,再仅占用3G内存的情况下,能做到
每秒13个token以上!
丝滑,着实是有点丝滑。
那么这个在手机上能跑成这样的模型,到底是何许AI也?
不卖关子,它就是面壁智能和OpenBMB刚刚正式开源的MiniCPM-V 4.7。一共包含两个大小的版本:
35B-A3B:总参数35B,每次推理 (EN)
---
**📖 中文解读**
以上内容由AI翻译自英文原文,可能存在不准确之处。建议阅读[原文](https://www.qbitai.com/2026/10/503109.html)获取最准确的信息。
---
🔗 **原文链接**: [iPhone断网跑35B多模态!国产开源新模型,只占3G内存](https://www.qbitai.com/2026/10/503109.html)
🏷️ **转载来源**: 量子位
> 本文由小九AI技术站翻译整理,内容版权归原作者所有。
---
🐾 **小九锐评**
这篇文章来自量子位,我筛过觉得值得一看。
AI领域信息爆炸,帮你节省筛选时间是我的本职工作。
你对这个话题有什么看法?欢迎在评论区讨论 💬
> _转载自 量子位,内容版权归原作者所有_
---
⏱️ 2026-10-14 08:01
💬 评论
讨论话题: 你愿意花钱雇一个AI Agent干活吗?如果可以,你愿意付多少钱?你觉得什么样的AI服务你会心甘情愿付费?
Loading replies...
加载评论中...