当前位置:首页 > AI资讯

面壁智能把 350 亿参数多模态模型塞进了手机

xinhack3周前 (10-19)AI资讯72

面壁智能把 350 亿参数多模态模型塞进了手机 AI资讯

10 月 18 日,北京面壁智能(ModelBest)发布开源多模态模型 MiniCPM-V 4.7,参数规模达 350 亿。据 Momenta Media 10 月 18 日报道,这个模型声称能在内存约 3GB 的 iPhone 17 Pro Max 上流畅运行,每秒生成超过 13 个 token,并且能读取照片、截图、文档、图表,解数学与科学题,理解长视频。还有一个 10 亿参数的小版本,面向入门手机和轻量设备。

手机内存装不下,它怎么塞进去的

手机内存通常放不下 350 亿参数的完整模型。MiniCPM-V 4.7 的解法是混合专家(MoE)加“存储分级”:模型被拆成许多专家模块,每生成一个词只调用其中少数几个,合计约 30 亿参数在内存里活跃。不用的专家留在手机存储里,按需加载。

从存储加载慢,是这套方案的老问题。面壁智能加了一个叫“前瞻专家调度”的步骤:模型处理某一层时,预测下一层需要哪些专家并提前加载。公司称大多数情况下超过 80% 的所需模块已提前就位,而且这个技巧不改变模型回答。

速度是怎么提上来的

结合权重压缩,面壁称在搭载 M4 芯片的 iPad Pro 上速度提升约 5 倍,达到每秒超过 17 个 token。公司自己的对比说,得分高于同规模同设计的阿里 Qwen3.6 35B-A3B,响应更短。这些速度与质量对比均来自厂商自测,需要第三方复现。

一个重要背景:苹果自己的设备端模型总参数约 30 亿。面壁的做法是把“活跃部分”维持在相近规模,却调度了一个远更大的参数池——这是端侧模型的一条新思路。

它已经能怎么用

  • 读图问答:拍一张图表,问它温度换算,直接在手机上算。
  • 长视频理解:丢一段长视频,让它总结关键内容。
  • 文档与截图:读 PDF、网页截图,做提取和解释。

模型采用 Apache 2.0 许可,可免费下载与商用,权重已于 10 月 6–7 日上传 Hugging Face;面壁称苹果、AMD、Arm、Intel、NVIDIA,以及华为、昆仑芯、摩尔线程等芯片厂商从发布首日起就提供了支持。

边界要讲清楚

第一,3GB 是“活跃内存占用”的口径,完整权重仍在存储里,首次加载会有延迟。第二,所有速度数字来自厂商测试,不同机型、不同任务会有差异。第三,它仍是端侧模型,复杂推理的上限低于云端大模型,别按“手机上的 GPT”去规划关键任务。

一句话:端侧多模态正从“能跑”走向“能日常用”,但存储分级与前瞻调度,才是它真正的技术增量。

相关文章

谷歌发布 Gemini 4 Argon:百万 token 输出解锁了什么新场景

谷歌发布 Gemini 4 Argon:百万 token 输出解锁了什么新场景

输出上限提升 15 倍至 100 万 token,超长文档与大型代码任务可一次生成。智能体编程界面同步内置客户端,输出侧军备竞赛开启。…

Anthropic 设公共福利基金,IPO 估值传下调至 1.5 万亿美元

Anthropic 设公共福利基金,IPO 估值传下调至 1.5 万亿美元

10 月 19 日,多家媒体披露 Anthropic 将拿出 5% 股份注入新设的公共福利基金,同时其 11 月 IPO 的目标估值被传从约 2 万亿美元下调到 1.5 万亿。这篇讲清这两件事分别意味…

英伟达开源 Nemotron 3.5 Super VL 120B,智能体模型交给企业自建

英伟达开源 Nemotron 3.5 Super VL 120B,智能体模型交给企业自建

10 月 19 日,英伟达开源 Nemotron 3.5 Super VL:1200 亿总参、100 万上下文的开放智能体模型,并推出面向本地 AI PC 的轻量 Bolt 系列。这篇讲清它是什么、企…

英伟达GTC柏林亮出AI工厂蓝图:预制数据中心14天上线

英伟达GTC柏林亮出AI工厂蓝图:预制数据中心14天上线

10月21日英伟达GTC大会首次落地柏林,黄仁勋系统发布AI工厂全栈架构。本文拆解DSX POD预制集装箱方案如何把AI数据中心部署从数月压到14天,以及配套的开源模型与智能体安全工具。…

OpenAI 收购 Orchestra Bio,AI 进生物科技深水区

OpenAI 收购 Orchestra Bio,AI 进生物科技深水区

据 SwiftInference 10 月 21 日梳理,OpenAI 已收购生物科技公司 Orchestra Bio,意在强化生命科学领域能力。本文看这笔交易为何被视为 OpenAI 从通用助手走向…

Anthropic 推 Claude Duet,个人智能体三强混战成形

Anthropic 推 Claude Duet,个人智能体三强混战成形

10 月 21 日 Anthropic 开放 Claude Duet 研究预览,主打主动式个人智能体。本文把它放进 Meta Muse、OpenAI dots 的竞争格局里,看「常驻在线、持续代办」这…

OpenAI 用 GPT-5.6 揪出 PHP 严重漏洞,全球紧急打补丁

OpenAI 用 GPT-5.6 揪出 PHP 严重漏洞,全球紧急打补丁

10 月 21 日 OpenAI 公布 Patch the Planet 行动:GPT-5.6 Sol 在攻击者之前发现 PHP 严重漏洞。本文看 AI 如何从「写代码」走向「修代码、护基础设施」。…

美国国土安全部下令移除 DeepSeek,联邦机构 60 天内可申请例外

美国国土安全部下令移除 DeepSeek,联邦机构 60 天内可申请例外

10月19日美国国土安全部下令联邦文职机构移除 DeepSeek 相关产品并禁止采购。本文看这道命令的覆盖范围、法律依据,以及它和同日对华制裁的关系与对出海的影响。…