您现在的位置是:综合 >>正文
浪潮信息发布"元脑SD200"超节点,面向万亿参数大模型创新设计
综合17818人已围观
简介北京2025年8月8日 /美通社/ -- 8月7日,浪潮信息发布面向万亿参数大模型的超节点AI服务器"元脑SD200"。该产品基于浪潮信息创新研发的多主机低延迟内存语义通信架构,以 ...
北京2025年8月8日 /美通社/ -- 8月7日,浪潮浪潮信息发布面向万亿参数大模型的信息向万超节点AI服务器"元脑SD200"。该产品基于浪潮信息创新研发的发布多主机低延迟内存语义通信架构,以开放系统设计向上扩展支持64路本土GPU芯片。元脑亿参元脑SD200可实现单机内运行超万亿参数大模型,超节创新并支持多个领先大模型机内同时运行及多智能体实时协作与按需调用,点面目前已率先实现商用。数大设计在实际评测中,模型元脑SD200运行DeepSeek R1和Kimi K2等全参模型的浪潮64卡整机推理性能实现超线性扩展。
当前,混合专家模型(MoE)的发布高效架构正在驱动大模型参数规模持续扩展,国内外前沿大模型的元脑亿参参数量快速突破万亿规模,这给算力系统架构提出新的超节创新挑战。一方面,点面模型参数量增加和序列长度增加带来的数大设计键值缓存(KV cache)激增,需要智能计算系统具有超大显存空间承载,依靠单芯片或节点的性能提升已难以为继;且其推理过程作为通信敏感型计算,对分布式计算通信延时要求极高,需要构建更大向上扩展(Scale up)高速互连域。另一方面,智能体AI开启多模型协作的新范式,其推理过程需要生成比传统模型多近百倍的数据词元(token),导致计算量激增。
元脑SD200超节点AI服务器是浪潮信息面向万亿参数大模型AI时代而设计,创新研发多主机低延迟内存语义通信架构,基于开放总线交换技术构建,在单机内实现了64路GPU芯片的高速统一互连,成功解决万亿大模型对超大显存空间和超低通信延时的核心需求。在开放架构之上,元脑SD200通过智能总线管理和开放的预填充-解码(Prefill-Decoder)分离推理框架实现软硬件深度协同,智能化管理复杂AI计算任务。
- 在架构层面,元脑SD200基于自主研发的开放总线交换技术首创多主机三维网格系统架构,实现64路本土GPU芯片高速互连;通过创新远端GPU虚拟映射技术,突破多主机交换域统一编址难题,实现显存统一地址空间扩增8倍,单机可以提供最大4TB显存和64TB内存,为万亿参数、超长序列大模型提供充足键值缓存空间。同时,依托百纳秒级超低延迟链路,构建64卡大高速互连域统一原生内存语义通信,实测结果表明,在推理过程常见的小数据包通信场景中,全规约(All Reduce)性能表现优异,显著提升计算与通信效率。
- 在系统层面,根据万亿参数大模型计算、通信需求特征,浪潮信息开发智能总线管理系统,实现超节点64卡全局最优路由的自动创建,支持不同拓扑切换,资源按需切分。对于全规约、全聚集(All Gather)等典型通信算子,开展不同数据量大小的细粒度通信策略设计,如多层级通信机制等,实现通信延时进一步降低。同时依托开放的PD分离框架,支持异步KV Cache高效传输与差异化并行策略,在提升业务服务级别目标的同时保持对多元算力的兼容性,实现计算与通信架构的深度协同优化。
元脑SD200超节点AI服务器通过软硬协同系统创新,成功向上扩展突破芯片性能边界,在大模型场景中展示出优异的性能表现。结合优化的PD分离框架,SD200超节点满机运行DeepSeek R1全参模型推理性能超线性提升比为3.7倍,满机运行Kimi K2全参模型推理性能超线性提升比为1.7倍。
当前,开源模型的飞跃式进步正在加速智能时代的到来,推动研发范式从封闭走向开放协作。同时,随着大模型参数量的持续提升,对算力基础设施的建设提出了更高要求。浪潮信息通过开放系统架构创新,为开源大模型的规模化落地和应用创新提供关键支撑。
Tags:
相关文章
XO酱鲜虾什锦炒饭:夏天里的简单快手食儿
综合原料:剩米饭1小碗,甜玉米粒3汤勺,腊肠1根,干木耳3朵,海虾5个,XO酱1汤勺,盐1茶匙,料酒1汤勺。做法:1.腊肠切片,干木耳泡发切块,米饭如果没有隔夜的剩米饭,也可以焖饭的时候少放一点水。2.海 ...
【综合】
阅读更多新西兰大胜中国台北进八强 可能在半决赛碰中国男篮
综合图源:新华社北京时间8月9日晚至10日凌晨,2025男篮亚洲杯C组和D组的小组赛全部结束,沙特84-59印度锁定C组第二,新西兰118-78中国台北拿到D组第一直接晋级八强,可能会在半决赛遭遇中国男篮 ...
【综合】
阅读更多特朗普将见普京,这场危机已成“对美国耐心的考验”|国际识局
综合中新网8月8日电(冯小妍 孔庆玲)美国总统特朗普7月向俄罗斯发出“最后通牒”,称俄方必须于8月8日前与乌克兰达成和平协议,否则将面临美方严厉制裁。通牒期内,特朗普频频对俄出招,军事威慑、经济制裁威胁与 ...
【综合】
阅读更多
热门文章
最新文章
友情链接
- [新浪彩票]足彩第25098期大势:迈阿密国际不败
- 双色球头奖时隔380天再空开 奖池余额24.91亿
- 东亚杯开战!国足首场对阵韩国 数据示有望抢分
- 伤停补时阶段遭绝平 中国女足东亚杯首战战平韩国
- 索尔纳造4.7倍冷负 足彩任九开483注14358元
- 围棋智能机器人等级评定启动 围棋等级测评智能化
- 大乐透头奖7注1000万1注追加 奖池余额16.12亿
- 新浪彩票名家大乐透第25076期推荐汇总
- 常昊:定段赛加强后备人才培养 增设海外组推动国际化
- 竞彩大势:拉纳卡主胜可期 赫根有望全身而退
- 吃遍厦深铁路沿线美食:清早漳州卤面 中午龙岗三黄鸡
- 一场4:1验出申花弃将真实力!3场造4球已彻底正名,穆帅眼光真准
- 本轮强降雨过程已结束,广东结束防汛Ⅳ级应急响应
- PS前高管谈AI对游戏行业影响:不会大幅降低成本
- 黑料视频通过去,明星集体破防!
- 曝《生化危机9》将成系列终章 保护伞与浣熊市的终结!
- 几家英超球队不满曼城财务违规案进度,若无罪英超CEO可能得辞职
- 四强又要遭遇黑哨了?伊拉克裁判仍在,八强曾出现连续争议判罚!
- 红醋栗和黑醋栗的区别
- 性能跃升,安全护航