Liquid AI 10 月 27 日发布新一代基础模型 LFM3,采用卷积、滑动窗口注意力与全局注意力组成的「三混合」架构,预训练 22T token。首批 6 款模型都从 LFM3-1.7B-Base 分支,均约 2B 参数,权重已上架 Hugging Face(LFM Open License v1.0)。官方称文本模型 LFM3-1.7B 4-bit 约占 1GB 内存、支持 256K 上下文,在多项智能体基准上超过体量数倍的模型。

核心要点速览

  • ✓6 款模型:LFM3-1.7B(文本)、VL-2B(视觉/视频)、Audio-2B、Omni-2B,以及决策模型 d1-2B 与 d1-Omni-2B
  • ✓架构:24 层中 13 层门控短卷积、5 层 256-token 滑窗注意力、6 层全局注意力;预训练 22T token
  • ✓官方口径:LFM3-1.7B 在 SWE-bench Verified(OpenCode)得 43.40,Qwen3.5-4B 为 41.20、Qwen3.5-9B 为 51.20
  • ✓官方口径:WebArena-Verified 38.42、AutomationBench 41.29,均高于 Qwen3.5-9B(28.94 / 15.10)
  • ✓128K 上下文 KV cache 约 1.6GB,单卡 B300 + SGLang 每天可产出约 36 亿 token(官方口径)
Liquid AI 发布 LFM3:6 款约 2B 参数的开放权重模型,覆盖文本、视觉、音频、全模态与决策
🖼️要闻配图
点击全屏高清查看
🧭

把技术选型换算成你的开发预算

40 款主流编程套餐横向比价,支持输入/输出 Token 真实账单模拟

🔬

深度技术解析与实战评估

核心背景与行业痛点

端侧模型参数少,能力往往撑不起智能体任务;而云端大模型又有延迟、成本和隐私问题。Liquid AI 此前的 LFM2 证明了「短卷积 + 注意力」混合结构能在手机上跑得快,LFM3 的目标是在同样的体量里塞进更多智能体能力。

架构亮点与底层机制

LFM3 用硬件在环的架构搜索,在 14 种设备与后端组合(三星 S26 Ultra、树莓派 5、M4 Max、高通 Hexagon NPU 等)上重新设计结构。24 层里 13 层是门控短卷积(卷积核从 3 扩到 7),5 层是 256 token 滑窗注意力,6 层是全局注意力,并加入按头门控、部分 RoPE 和 sandwich norm。预训练 22T token,最后 3.5T 为含大量智能体轨迹的中期训练,并把上下文扩到 256K。

权威 Benchmark 与实测跑分对比

以下均为官方/厂商口径:LFM3-1.7B 在 BFCL V4 得 71.39、IFEval 96.66、WebArena-Verified 38.42,后两项智能体任务超过 Qwen3.5-9B;但在 SWE-bench Verified(43.40 对 51.20)和 GPQA Diamond(63.37 对 80.40)上仍落后更大的模型,官方也承认编码与知识类任务「体量更重要」。目前尚无第三方独立复测。

开发者实战落地与开箱指南

权重已在 Hugging Face 的 LFM3 合集上架,附 GGUF、MLX、ONNX、FP8、NVFP4 等量化版本,也可在 Liquid Playground 和 API 试用。官方称每个模型都能单卡微调,适合把小模型训练成邮件分拣、日程、工具检索等专项智能体。注意许可证是 LFM Open License v1.0,并非 MIT/Apache,商用前请先读条款。

实战指南准备好将技术转化为生产力?

即刻查看该技术对应模型与主流工具的实测差异,或一键测算团队 API 调用与 $20/月套餐盈亏平衡点。

接着读OpenBMB 开源 MiniCPM-V 4.7:35B-A3B 首个 MoE 端侧多模态模型,iPhone 17 Pro Max 实测 13+ token/s
立即阅读→