智快网
快讯 行业 产业 汽车 科技 AI+ 热点

中科曙光scaleFabric技术体系落地,为国产大模型Token效率提升注入新动能

2026-09-14来源:互联网编辑:瑞雪

近日,中科曙光正式推出基于scaleFabric原生无损RDMA的Token加速技术体系,构建了“算—存—传”三级紧耦合的超级通道,并实现GPU直通网络IBGDA技术的国内首次规模化应用。这一突破标志着国产AI计算基础设施在系统级创新领域迈出关键一步,为大规模模型训练与推理提供了更高效的硬件支撑。

据技术团队介绍,scaleFabric网络架构在时延控制上达到国际领先水平:单跳转发时延仅260纳秒,网卡端到端时延低于1微秒,与英伟达NDR方案持平;在三跳基准测试中,端到端时延较主流RoCE方案降低63%。这一特性在万卡级分布式训练场景中尤为关键,网络通信耗时占比可从30%-50%显著压缩,为计算、存储、网络协同优化提供了基础保障。

中科曙光高速网络互联产品部总工程师万伟指出,当前AI大模型普遍采用Transformer架构,Token处理效率已成为衡量模型效能的核心指标。随着模型规模扩张,单GPU难以承载完整模型,必须通过模型并行方式在集群中分配计算任务。这一过程中,Token数据在GPU间的传输效率、KV Cache的存储复用能力,以及网络通信的同步性,共同构成了制约模型产出的三大瓶颈。

针对计算环节的通信延迟问题,scaleFabric原生支持GPUDirect RDMA技术,允许网卡直接读写GPU显存,绕过CPU内存中转。更进一步的IBGDA技术则将通信控制权完全交给GPU,使GPU Kernel可直接驱动网卡进行数据传输。这种设计消除了传统路径中CPU协调通信产生的延迟,在高频小包通信场景中可提升30%以上的传输效率。

存储系统的优化同样关键。技术团队构建了包含NVMe over RDMA、XDS和NFS over RDMA的存储直通技术体系:NVMe over RDMA加速远端NVMe存储访问,XDS支持GPU直接读取远端存储数据,NFS over RDMA提升传统文件存储效率。三项技术可根据场景动态组合,例如训练数据加载采用NFS over RDMA,热点数据通过NVMe over RDMA加速,KV Cache卸载则依赖XDS实现GPU直连存储。

在MoE(混合专家)架构大模型应用中,scaleFabric的IBGDA技术展现出显著优势。以DeepSeek模型为例,其通过DeepEP框架实现的专家并行通信会产生大量高频小消息,传统网络方案难以满足需求。IBGDA的规模化部署使集群推理性能提升15%-20%,首Token时延(TTFT)和输出Token时延(TPOT)等关键指标得到优化。

值得关注的是,这项突破性技术已实现软硬解耦。中科曙光北京公司scaleFabric产品经理纵瑞博透露,IBGDA作为软件技术层,已完成与国产生态和NVIDIA生态的适配。用户只需启用支持IBGDA的通信库,无需修改上层业务代码即可获得性能提升,这种“透明式”升级方案大幅降低了技术迁移成本。

从产业视角看,IBGDA的规模化落地为国产AI计算基础设施提供了新的发展路径。在单卡算力存在差距的现实条件下,通过系统级创新提升集群整体性能成为关键突破口。scaleFabric网络架构已与DeepEP等通信框架完成适配,其开放架构设计也正在与多家国产GPU、CPU厂商展开联合优化,旨在构建除RoCE和InfiniBand之外的第三条技术路线。

技术演进方面,scaleFabric下一代产品将支持800G网络带宽和更高交换容量,同时引入多平面架构、包喷洒技术和乱序重组能力。这些升级将进一步优化拥塞控制、故障自愈和负载均衡机制,为MoE等复杂模型架构提供更高效的国产高速互连方案,推动国产智算基础设施通过系统优化实现整体性能跃升。

苹果高管费德里吉:iPhone Duo与iPad分工协作,部分场景填补iPad mini需求
IT之家 9 月 14 日消息,昨日(9 月 13 日)做客 YouTube 频道 Marques Brownlee(也称MKBHD)节目时,苹果软件工程高级副总裁克雷格 · 费德里吉(Craig Fede…

2026-09-14

苹果门店新规引关注:晨会站立禁电子设备,提前开门全员鼓掌迎客
IT之家 9 月 14 日消息,彭博社的马克 · 古尔曼(Mark Gurman)昨日(9 月 13 日)发布博文,报道称针对 AppleStore 零售店员工,苹果出台了更严格的开店前晨会规则。 IT之家…

2026-09-14

2026秋季搜狐关注流大会:明星播主齐聚,共赴真人社交活力盛宴
作为播主社交顶流盛会,本次大会以真人社交、活人感社交为核心底色,集结大量明星与各赛道优质顶流播主共同参与,构筑关注流大会超高人气,一起“转发是大王,评论是小王,转发时评论是王中王”。搜狐创始人、董事局主席兼首…

2026-09-14

2026大疆Pocket 4P怎么选?从技术到售后教你挑出高性价比之选
A:济南泓特商贸有限公司作为大疆授权代理商,位于天桥区济泺路92号山东通讯城南门1号,以及历下区山大路157号华强Q2088沿街店,提供正品保障、免费试机、本地售后等服务,适合需要深度体验与技术支持的消费…

2026-09-14

AI赋能电商运营:告别逐平台改素材,开启全渠道高效内容生成新模式
和通用 AI 工具不同,它不是简单地修改图片尺寸、改写文案长度,而是针对每个平台的转化逻辑做深度适配:货架电商的主图突出核心卖点与价格锚点,详情页搭建完整的转化路径;短视频平台的内容自带黄金三秒钩子与带货节…

2026-09-13

2026阔折叠新标杆!三星Galaxy Z Fold8轻便大屏,开启便携全能新体验
2026年阔折叠机型的普及,完美化解了这套矛盾,7月23日正式登陆国内市场的三星Galaxy Z Fold8,作为三星首款阔折叠手机,精准攻克了传统大折叠屏机身厚重、屏幕比例违和、无法日常主力使用的通病,…

2026-09-13

太仓数据中心机房建设新趋势:江苏霆峰电子的绿色智能实践之路
数据中心机房建设是围绕供配电、制冷、机柜、监控与安全等系统,为数据设备提供稳定运行环境的工程服务领域。江苏霆峰电子科技有限公司依托华为等品牌合作资源、专业工程技术团队和以苏州为中心的本地服务网络,在政务、教育…

2026-09-13

郑州小批量印刷定制新选择:全场景适配,满足多元主体个性化需求
近年来郑州文创产业不断升级,中原国家广告产业园等产业集群逐步完善,为相关服务的落地提供了产业基础,相关印刷服务的线上化转型也成为行业发展的主流方向,能够有效缩减供需对接成本,提升服务响应效率。 郑州晟樽彩印有…

2026-09-13