跳到正文
原文
OpenBMB· @OpenBMB · X·· 2026-09-08AI 评分35
AI 导读

感谢测试并分享这些数据!🙌 “在本地运行一群这样的模型”——这正是我们的愿景。2B 参数,Q4 量化后 1.56GB,4090 上 200+ tok/s,同时性能仍能跟上 4B 模型。这就是本地 AI 智能体应有的样子。 期待看到你用它们构建的东西 🔥

整理与数据来源:AIHOT

来源:OpenBMB · x.com