资讯
IFM Releases K2 Horizon: Six Apache 2.0 Models From 0.9B to 375B
📋总体概括
MBZUAI旗下前沿实验室IFM(2025年5月成立)发布K2 Horizon开放模型家族,一次推出六个Apache 2.0许可模型,覆盖0.9B、3.7B、7B、32B、36B-A4B到375B-A23B的完整规模梯度,并同时公开预训练语料。与多数实验室只放一个checkpoint加基准表不同,IFM以MoE混合架构覆盖不同算力场景,意在建立从端侧到数据中心的完整开源生态。
⚡关键信息
- ▸IFM是MBZUAI于2025年5月成立的前沿实验室,上周发布K2 Horizon模型家族。
- ▸K2 Horizon共六个模型,全部采用Apache 2.0许可,规格为375B-A23B、36B-A4B、32B、7B、3.7B和0.9B。
- ▸375B-A23B与36B-A4B采用MoE架构(总参数-激活参数),兼顾大容量与低推理成本。
- ▸除模型权重外,IFM还同步开放了预训练语料,透明度高于常见的单checkpoint发布模式。
- ▸覆盖0.9B到375B的规模梯度,可服务从端侧部署到数据中心的全场景需求。
🔥犀利点评
一次放六个模型加预训练语料,这步子比只会发benchmark表的同行实在得多。Apache 2.0加MoE规格组合,明摆着冲着企业商用部署去的——大MoE撑门面,小模型铺落地。但开放语料的真实质量、清洗程度,还是要等第三方复现才能下结论。开源牌打得好不好,最终看生态有没有人接。
📰 相关资讯(与本文相关的其他资讯)
本文由本站自动聚合,以下为原始来源:前往 marktechpost.com 阅读全文 →