正缘测试面壁小钢炮4.0发布:性能比肩 Qwen-3-8B,极限220倍提速
新浪科技讯(🚫) 6月10日下午消息(📯),近日,面壁智能第四代“面壁小钢炮” MiniCPM4.0 端侧模型(代号“前进四”)发布。据悉,第四代小钢炮拥有 8B 、0.5B两种参数规模,实现(👹)了同级最佳的模型性能。可让长文本、深思考在端侧真正跑起来,实现220倍极限加速。
正缘测试 其中,MiniCPM 4.0-8B 模型为稀疏注意力模型,在MMLU、CEval、MATH500、HumanEval等基准测试中,以仅22%的训练开销,性能比肩 Qwen-3-8B、超越Gemma-3-12B。MiniCPM 4.0-0.5B在性能上,也较更大的Qwen-3-0.6B、Llama 3.2实现仅2.7%的训练开销,一半参数性能翻倍,并实现了最快 600 Token/s的极速推理(♎)速(👹)度。
正缘测试 相较于Qwen-3-8B、Llama-3-8B、GLM-4-9B等同等参数规模端侧模型,实现了长文本推理速度5倍常规加速(🌒)以及最高 220倍加速(显存受限极限场景下测出),让端侧模型长文本推理“快如闪电”。面壁智能联合创始人兼首席科学家刘知远在与(👡)新浪科技沟通中表示,“最高220倍加速,其实是(➕)建立在我们模型架构、数据治理、软硬件结合(🚍)、训练等方面全栈创新优化成果之上的。”
正缘测试 刘知远指出,220倍的加速看上去比较夸张,但本身其实存在一个特殊性——由于MiniCPM4.0 在处理更长序列的数(👸)据时,可以更好地去处理Transformer架构带来的内存爆炸问题,避免了(🤮)长序列数据处(📗)理带来的内存占用倍增,而同尺寸的Qwen-3-8B、Llama-3-8B等模型并未就此进行优化,因此MiniCPM4.0有了突出的表现。
正缘测试(🎇) 据悉,MiniCPM 4.0 模型采用的InfLLMv2稀疏注意力架构改变了传统 Transformer 模型的相关性计算方式,有效摆脱了逐字(🛫)重复计算的低效,将稀疏度从行业普(💃)遍的40%-50%,降至极致的5%,注意力层仅需1/10的计算量即可完成长文本计算。且(🦇)对算子底层重写,进一步加速提升,并使得对文本相关性精准性大(🚸)大提升。
正(🕚)缘测试 值得一提的是,DeepSeek 使用的长文本处理架构NSA(Native Sparse Attention)也引用并采用了与InfLLM相同的分块注意力计算思路,但其对于短文(🕴)本的推理较慢,InfLLMv2则很好地解决了NSA在短文本推理上的短板。
正缘(😢)测试 在缓存消耗上,MiniCPM 4.0-8B在 128K 长文本场景下相较于Qwen3-8B仅需 1/4 的缓存存储空间。在速度、性能飙升的同时,又做到了模型极致压缩,让端侧算力(🤨)不再有压力。
(🛩) 据悉,基于 8B 版本,面壁智能已微调出两个特定能力模型,分别可以用作 MCP Client 和纯端侧性能比肩Deep Research的研究报告神器MiniCPM4-Surve。截至目前,面壁小钢炮 MiniCPM 系列全平台下载量累计破1000万。(文猛)
相关新闻
- 正缘测试武汉加快数据基础制度建设 促公共数据资源开发利用详细阅读
中新网武汉6月13日电 (卢琪 袁芳)武汉市近日印发《武汉市公共数据资源管理实施细则(试行)》(以下简称《实施细则》)、《武汉市公共数据授权运营实...
2025-06-1540
- 正缘测试以色列、沙特股市因中东冲突加剧下跌详细阅读
据报道,在以色列总理本雅明・内塔尼亚胡政府开始对伊朗发动空袭后,以色列股市在首个交易日下跌,而沙特阿拉伯的股票基准指数也因市场对该地区冲突可能扩大...
2025-06-1585
- 正缘测试华熙生物深夜发文回怼巨子生物:国货品牌的可信度基础,不能建立在学术名称与概念滥用之上详细阅读
6月14日,华熙生物今日晚间发文《关于透明质酸和重组胶原蛋白的传言与真相》,再度回应近期与巨子生物之间的风波。 有传言说华熙生物上述举措是基于...
2025-06-15118
- 正缘测试“哈中关系持续稳步发展”——访哈萨克斯坦文化与信息部副部长叶夫根尼·科切托夫详细阅读
“在两国元首的战略引领下,哈中关系持续稳步发展,不断迈上新台阶。”第二届中国—中亚峰会即将在哈萨克斯坦举行,哈萨克斯坦文化与信息部副部长叶夫根尼·...
2025-06-15128
- 正缘测试今年前5个月中国检方办理文物和文化遗产保护公益诉讼案2160件详细阅读
中新社北京6月14日电 (记者 张素)“今年1月至5月,全国检察机关共立案办理文物和文化遗产保护公益诉讼案件2160件,在公益诉讼办案总数中占比4...
2025-06-15131
- 正缘测试伊朗外交部发言人:尚未就伊美核问题会谈做出“最终决定”详细阅读
中新社北京6月14日电 德黑兰消息:伊朗外交部发言人巴加埃14日就原定于15日举行的新一轮伊朗与美国核问题间接会谈表示,伊方尚未做出“最终决定”。...
2025-06-15157
- 详细阅读
- 正缘测试我国新增10家国家考古遗址公园详细阅读
中新网6月14日电 据国家文物局微信公众号14日消息,国家文物局近日发布《国家文物局关于公布10家国家考古遗址公园名单的通知》,10家单位列入国家...
2025-06-15171