智算多多
官方邮箱:service@zsdodo.com

公司地址:北京市丰台区南四环西路188号总部基地三区国联股份数字经济总部


京公网安备11010602202532号 随着人工智能产业重心从模型训练转向规模化推理服务,推理算力已经成为支撑Token工厂、AI智能体、文生视频等业务的新型数字基础设施。大模型并发服务对吞吐量、能耗成本提出极高要求,传统单一GPU推理架构越来越吃力。
一方面,数据频繁搬运会带来“内存墙”和“功耗墙”;另一方面,国内先进芯片制程供给受限,单纯靠硬件工艺升级提升算力,空间有限。行业需要跳出“只追先进制程”的思路,从系统架构层面寻找新解法。
项目团队从系统架构创新入手,首次将国产通用GPU与类脑芯片深度融合,打造对标英伟达下一代国际先进异构推理方案的国产化系统。创新实现Transformer模型AF分离推理模式:将Attention(注意力)计算与FFN(前馈网络)模块拆分,由不同特性的国产芯片分工处理。Attention计算交由国产GPU承载,FFN模块交由类脑芯片处理,充分发挥类脑芯片存算一体、片上大容量SRAM的架构优势,突破传统GPU推理瓶颈。
同时,团队自研的模型编译器、高速互联协议和统一推理引擎,可完成两类算力的任务拆解、协同调度、结果聚合,真正实现了两种架构算力优势互补。项目已在DeepSeek-V4-Flash大模型上完成完整调优验证,相较同类国产GPU算力集群,推理输出和能效均提升1倍以上,业务运营成本降低超40%。
这意味着,移动云依托国内成熟工艺的国产芯片,通过系统架构创新,具备对标国际下一代推理架构的业务能力,为大模型推理国产化落地提供了可复制的技术范式。
该成果是产学研用协同创新的典型实践,整合运营商、芯片企业、科研院所、高校多方力量,打通了从底层芯片适配、推理引擎开发到业务场景验证的完整链条。后续移动云将持续迭代异构推理系统,面向Token工厂、AI代码开发、文生视频、多智能体协同、智能制造、金融通信安全等场景开展落地验证,并计划将核心异构推理框架逐步开放,赋能国内GPU、类脑芯片厂商及算力运营商,带动国产算力产业链整体发展。
本次异构混合推理系统在中国算力大会首发,为智能体时代的AI推理提供国产化全新算力底座。以架构创新弥补工艺约束,这一方案也为国内AI算力自主发展提供重要的创新参考方向。
