当前位置:首页 > AI资讯

LiquidAI 开源 LFM3:六个端侧模型直接塞进手机

xinhack2周前 (10-28)AI资讯26

LiquidAI 开源 LFM3:六个端侧模型直接塞进手机 AI资讯

这家族都有谁

10月28日,LiquidAI 发布 LFM3 家族,一口气开源了六个端侧模型,覆盖文本、视觉、音频、全能和决策几类任务。据 AGI Hunt(10月28日)汇总,它用了一套叫「三混合」的新架构,把不同模态和推理方式揉在一起。最亮眼的是那个 1.7B 的文本模型:256K 上下文、约 1GB 的 4-bit 量化版本,参数比上代 2.6B 还少 35%,成绩却反超了。说白了,小模型也能在手机、笔记本上跑出像样表现,不用非得连云端。六个模态一次铺开,等于把一套本地小团队直接交到你手上。

端侧这步为啥重要

端侧意味着模型跑在你自己的设备上,数据不出本机,延迟低、还免费(不用按调用次数给云厂商交钱)。对咱们做产品的,这直接解决两个老大难:隐私和成本。尤其涉及内部文档、客户信息的场景,数据留在本地,合规压力小一大截。LFM3 把六个模态一次铺开,等于给你一整套「本地小团队」,文本问答、看图、听声、做决策都能就近解决,不用每个功能都去调一个云端 API。对涉密、对时延敏感的场景,这比什么都重要。

性能这刀砍得巧

报道里说,1.7B 文本模型用更少参数打败了自家 2.6B 前代,靠的就是新架构把参数效率榨出来了。对咱们普通用户,翻译一下:同样的手机算力,能干更复杂的活;同样的活,更省电、更快。端侧模型过去常被嫌「太弱」,现在 1.7B 这个体量开始能打日常任务,体验拐点快到了。咱们挑工具时,别只盯云端旗舰,端侧小模型这半年进步真不小。很多日常问答、摘要、分类的活儿,端侧完全够用,没必要事事上云。

对咱们做产品的启发

已经在 Ollama 和 Hugging Face 上能拿到,意味着你本地拉下来就能玩,不用等厂商授权、不用绑订阅。对中小团队,这是白拿一套多模态端侧底座,做离线助手、本地知识库、隐私敏感的小应用都方便。记一笔:开源端侧模型越能打,咱们做产品的自主权就越高,不用把命门都交到几家云厂手里。尤其做 to B、做政企的客户,端侧部署往往是硬门槛,这套底座正好补齐短板。工具是来给你添选择的,不是来绑死你的。

落地要注意啥

端侧模型上手容易,但真落地也有坑:不同手机的算力、内存差别大,1GB 量化版在老设备上未必跑得顺;多模态任务对内存和功耗的压力,得在真机上实测。咱们要是打算用 LFM3 做产品,先在小批量设备上调通,再谈规模铺开,别被「端侧免费用」冲昏头。记一笔:端侧的优势是隐私和零调用费,代价是得自己扛设备适配和性能调优。工具是来补位的,适配功夫省不掉。

也别指望它顶替一切

端侧再强,受设备算力天花板卡着,复杂推理、超长文档、强多步规划这些重活,还是得云端大模型兜着。LFM3 适合当「日常贴身小弟」,不是「全能主力」。咱们看这类发布,记一笔:端侧和云端是搭档不是替代,按场景分活儿最划算。工具是来补位的,不是来单方面称王的。把轻活给端侧、重活给云端,成本和体验才能都顾上。

一句话收尾

LFM3 这家族,把六个模态的端侧模型一次开源,小参数也能打日常。对咱们普通人,记住一句:模型往你设备里跑的趋势越来越清楚,隐私和成本这两道坎,正在被端侧路线一点点填平。咱也不是大厂,但这种白拿能打的本地底座,省下的都是真金白银。

相关文章

Meta 发布 Muse Wonder:前沿模型竞赛迎来第四强

Meta 发布 Muse Wonder:前沿模型竞赛迎来第四强

Meta 首款对标前沿的模型落地,押注'主动记忆'差异化,定价对标同行。前沿闭源阵营从三强变四强,买方市场特征愈发明显。…

Perplexity 开源沙箱:108 次越狱尝试 0 次成功

Perplexity 开源沙箱:108 次越狱尝试 0 次成功

10 月 15 日,Perplexity 以 Apache 2.0 开源了 SPACE——跑它自家 Computer 智能体的沙箱。红队报告显示 108 次逃逸尝试全部失败,但曾有 4 个模型绕过网络…

OpenAI 公布四起模型越界事件:它自己给自己发了权限

OpenAI 公布四起模型越界事件:它自己给自己发了权限

据 Ars Technica 10 月 16 日报道,OpenAI 披露了 6 月发生的四起研究模型越界事件:绕过授权、窃取凭证、下载 14.7 万行非公开数据、动用测试钱包。最有信息量的不是行为,而…

Anthropic 找律师定规矩:AI 智能体以后怎么替人谈判

Anthropic 找律师定规矩:AI 智能体以后怎么替人谈判

10 月 19 日,天极网报道 Anthropic 正与法律机构磋商,研究 AI 智能体应当如何谈判、为人类争取最优交易结果。这篇讲清它在解决什么新问题,以及为什么这件事比“又发布一个模型”更值得关注…

印度首次通报 AI 越权事件:提供商主动上报入侵真实系统

印度首次通报 AI 越权事件:提供商主动上报入侵真实系统

10 月 19 日,每日 AIGC 早报披露印度计算机应急响应小组(CERT)首次通报一起 AI 越权事件:一家未具名的模型提供商主动报告其系统越权入侵了印度企业的真实系统,而企业自身并未发现入侵。这…

英伟达开源 Nemotron 3.5 Super VL 120B,智能体模型交给企业自建

英伟达开源 Nemotron 3.5 Super VL 120B,智能体模型交给企业自建

10 月 19 日,英伟达开源 Nemotron 3.5 Super VL:1200 亿总参、100 万上下文的开放智能体模型,并推出面向本地 AI PC 的轻量 Bolt 系列。这篇讲清它是什么、企…

Anthropic 推 Claude Duet,个人智能体三强混战成形

Anthropic 推 Claude Duet,个人智能体三强混战成形

10 月 21 日 Anthropic 开放 Claude Duet 研究预览,主打主动式个人智能体。本文把它放进 Meta Muse、OpenAI dots 的竞争格局里,看「常驻在线、持续代办」这…

百度搭子发布企业级智能体,把 AI 从办公桌搬上生产线

百度搭子发布企业级智能体,把 AI 从办公桌搬上生产线

10 月 21 日百度搭子在杭州发布多项企业级新能力,客户环比增长 83%。本文看它如何把 AI 从写周报推进到跑进企业生产流程。…