OpenBMB 发布端侧小模型 MiniCPM5-2B:原生支持 128K 上下文与主流推理引擎

📡 MarkTechPost2026-09-08 03:18

OpenBMB发布端侧语言模型MiniCPM5-2B,原生支持128K上下文,采用标准架构并兼容主流推理引擎。

AI 深度解读

OpenBMB 于 2026 年 9 月 7 日发布端侧模型 MiniCPM5-2B,原生支持 128K 上下文并兼容 Llama 架构,为设备端长文本部署提供轻量方案。

  • 架构部署:参数 25.2 亿,遵循 Apache 2.0 协议,支持 vLLM 与 llama.cpp 等引擎直接加载。
  • 评测表现:34 项基准均分 53.9,代码与工具调用表现突出,但通用知识较更大尺寸模型仍有差距。
  • 训练方法:采用分层数据管理与 400B 微调,并通过在线策略蒸馏整合 16 个强化学习专家。
  • 影响/看点:若端侧能耗达标,该模型可能降低端侧智能体部署成本;落地效果仍取决于端侧硬件算力与长文本稳定性。
  • 资料依据:
  • MarkTechPost(2026-09-07):https://www.marktechpost.com/2026/09/07/openbmb-releases-minicpm5-2b-a-2-52b-dense-model-averaging-53-9-across-34-benchmarks-and-built-to-run-on-device/
  • GitHub(2026-09-07):https://github.com/OpenBMB/MiniCPM

本内容由 AI 生成,仅供参考,请注意甄别

查看原文 ↗
看实时 AI 热点雷达 实时信息流 · 事件聚类 · 订阅推送 —— 完整产品在 aihot.aicxd.com
AI 助手