热门搜索:和平精英 原神 街篮2 

您的位置:首页 > > 教程攻略 > 热点新闻 >单存储节点支持700+ GPU训练!华瑞指数云首秀登顶MLPerf全球存力榜

单存储节点支持700+ GPU训练!华瑞指数云首秀登顶MLPerf全球存力榜

来源:互联网 更新时间:2026-07-04 10:29

北京时间8月4日23时,MLCommons®——这个全球AI性能基准评测领域的权威组织——正式发布了MLPerf™ Storage v2.0存储性能基准测试的最新结果。华瑞指数云ExponTech作为AI-Native企业级全场景数据基础设施的参与者,这次与DDN、IBM、HPE、华&为、Hammerspace等众多国内外顶尖厂商同台竞技。结果如何?坦率说,表现相当亮眼,多项指标直接拿下了世界第一。

这次测试,ExponTech与英伟达、Scaleflux、AIC深度合作,在软件和硬件上都拿出了颇有创新的产品方案。目标很明确:验证在AI场景下,用新一代分布式存储软件栈驱动更精简、更高效的硬件方案,能否实现更高的性能密度、容量密度以及更低的成本。网络方面选用了RoCE,正好也能看看大规模组网能力和整体存储方案的扩展与并行访问能力到底如何。

硬件方案:轻装上阵

有意思的是,与不少参测者采用多台高配置存储服务器加IB网络的方案不同,ExponTech的存储节点仅仅用了一台2U的AIC盘框(JBOF F2026)。这台盘框本身没有CPU和内存,说白了就是一个纯硬件承载设备,优点在于极高的容量密度和硬件可靠性。2U空间最多能塞进26块SSD盘,这次测试配置了24块带压缩功能的Scaleflux CSD 5000 SSD盘。

盘框里插入了4张英伟达Bluefield-3 DPU卡,每张DPU提供200Gbps*2的RoCE网络带宽。关键在这里:ExponTech的WADP分布式存储软件完全跑在DPU内,这意味着高性能、高可靠的功能丰富的存储层,完全不依赖传统主机CPU。

网络这边,用了4台英伟达Spectrum-X交换机搭出一个2层的RoCE网络,重点验证大规模组网时的拥塞控制能力。基于这套网络加上WADP软件,理论上能扩展到连接1024台盘框,形成一个EB级容量、上百TB级存储带宽的超大规模高性能存储池。

软件实力:效率为王

再说软件。ExponTech WADP(WiDE AI Data Platform)分布式存储软件,基于完全自研的下一代分布式存储引擎WiDE以及分布式元数据引擎天枢构建。在同一个存储池空间内,它能向上提供丰富的协议接口,包括块存储(NVMe-oF、vhost、iSCSI、CSI-NVMe-oF)、文件存储(POSIX、NFS、SMB)、对象存储(S3)以及KV接口等。这次测试的WADP软件,以分布式架构的方式完全跑在4张Bluefield-3 DPU上,每张DPU仅配置了16核CPU和48GB内存——这样的硬件资源,放在传统方案里几乎不够看,但WADP却展现出了极其高效的硬件利用效率和IO处理能力。

测试结果:数据说话

ResNet-50训练场景:

基于1个2U存储节点,配合1个客户端和2个客户端的测试结果显示,这套方案可以轻松满足模型ResNet-50的训练需求。单客户端能支持的GPU卡数量最高达到240块,带宽23.6GiB/s。在存储节点硬件采用DPU+JBOF、CPU和内存都不算强(AI控成本嘛)的前提下,依然领先所有其他参测厂商的方案,位居世界第一。

通过数据测算,ExponTech WADP使用一个2U存储节点,在配置4个客户端的场景下,可以支持超过700块A100 GPU训练卡和约400块H100 GPU训练卡的训练需求,稳定提供70+GiB/s的带宽——基本逼近存储节点网络带宽的极限。当然,这套方案也支持扩展到更多2U存储节点,形成大规模高性能存储集群,应对超大规模的AI训练场景完全没问题。

Checkpoint工作负载:

MLPerf Storage v2.0这次新推出的检查点(Checkpoint)工作负载,专门针对分布式扩展系统中大型语言模型(LLM)的训练场景,重点优化训练过程的备份与恢复速度。ExponTech WADP方案在Llama3-8B模型上的实际测试数据,处于全球领先水平。

实测写带宽16.9GiB/s,略低于JINIST(采用华&为OceanStor A800方案)的19.4GiB/s和ANL(采用开源DAOS方案)的18.1GiB/s,位居世界第三。但需要注意一个关键细节:ExponTech WADP方案采用的存储硬件配置远低于前两者,使用的物理盘容量仅为前两者的1/5。这意味着,它的存储软件栈效率极为优异。如果按Checkpoint写入带宽除以容量来计算效率,ExponTech WADP排名将遥遥领先,稳居第一。

亮点提炼

超高密度与能效:

仅用单台2U JBOF设备搭载DPU作为存储节点,硬件配置规格远低于其他测试方案,却实现了超高的容量密度、性能密度和能效。

超高性能表现:

在硬件规格很低的前提下,依然交出了超高性能答卷。ResNet-50模型训练测试中,单客户端支持的GPU卡数和带宽排世界第一;Checkpoint写入带宽排世界第三,但使用了最少的SSD盘数。若按写入带宽/容量来计算效率,排名遥遥领先,充分体现了WADP存储软件极高的硬件利用效率。

极致I/O效率:

多轮测试中,GPU平均利用率(AU)稳定保持在96%以上。

弹性扩展能力:

WADP分布式软件架构可并行扩展到1024个节点,存储容量、IOPS和带宽同步并行扩展,同时保持稳定的微秒级时延。

可扩展网络验证:

四台NVIDIA Spectrum-X交换机搭建的两层RoCE网络,拥塞控制表现优异。结合WADP软件,方案可横向扩展至超大规模AI训练/推理场景。

存储效率倍增:

ScaleFlux CSD5000 SSD提供透明数据压缩/解压缩,在零性能损耗、无额外资源消耗的前提下,实现存储容量与效率的倍增。

首次参与MLPerf Storage v2.0基准测试就取得这样优异的成绩,不仅彰显了ExponTech存储技术的实力,也标志着其迈过了一个关键里程碑。这次测试延续了此前WADP(以其子产品WDS名义)在2023年创下的SPC-1基准测试世界纪录,印证了其在企业关键业务(SPC-1)与AI工作负载(MLPerf Storage)领域的双重竞争力。可以说,这是目前全球唯一一个在SPC-1和MLPerf Storage上都能够测出顶级成绩的分布式存储软件,真正成为覆盖全场景的企业级AI统一平台。未来,当企业把AI工作负载与核心业务相结合时,ExponTech WADP平台将发挥出更全面的价值。

展望未来,ExponTech还会在AI大模型领域持续深耕,不断突破性能极限,打造全球领先的AI数据平台,为企业注入新质生产力。近期,ExponTech将正式发布WADP的最新版本——一个融合支持企业级生产业务和AI训练推理业务,面向企业级AI的统一数据平台底座产品。

热门手游

相关攻略

手机号码测吉凶
本站所有软件,都由网友上传,如有侵犯你的版权,请发邮件haolingcc@hotmail.com 联系删除。 版权所有 Copyright@2012-2013 haoling.cc