IFM 发布开源模型舰队 K2 Horizon:参数最高达 375B,全流程可检视
IFM发布开源模型舰队K2 Horizon,涵盖0.9B至375B共6款模型,主打预训练到后训练全流程可检视。
AI 深度解读
IFM 宣布推出开源模型舰队 K2 Horizon,覆盖 0.9B 至 375B 参数区间,其核心价值在于探索模型全生命周期训练过程的可检视性与透明度。
- 舰队规模:系列模型包含 6 个不同规格的模型,参数量从 0.9B 延伸至 375B,构建了多梯度的互联模型集群。
- 全流程透明:项目覆盖从预训练、推理优化到智能体后训练等各阶段,尝试使训练数据流与权重演进过程全程可被检视。
- 研究价值:延续了开源社区对全透明模型训练(如 LLM360 倡导的训练检查点与数据开放)的探索,为学术界复现与审计前沿模型提供了工程参照。
- 影响/看点:若其完整的训练检查点与中间状态能够稳定复现,可能为评估大模型后训练演化规律提供关键样本,但其应用价值仍取决于开源社区对其权重和工具链的实际采纳度。
- 资料依据:
- X:Kim(2026-09-08):https://x.com/kimmonismus/status/2097403442272821754
- arXiv 论文(2023-12-11):https://arxiv.org/abs/2312.06550
本内容由 AI 生成,仅供参考,请注意甄别