APP下载

6GB / s 的性能体验!深信服 EDS 如何让 HPDA 应用又省又稳?

消息来源:baojiabao.com 作者: 发布时间:2024-05-20

报价宝综合消息6GB / s 的性能体验!深信服 EDS 如何让 HPDA 应用又省又稳?

数字经济时代,数据已成为新的核心生产要素。特别是在航空航天、气象科学、AI 自动驾驶及生命科学等领域,数据呈现指数级增长,以数据密集型为典型特征的高性能数据分析(HPDA)开始出现。

深信服分布式存储 EDS 不仅可以满足计算密集型应用性能需求,也解决了传统存储方案拓展性不足与成本过高的问题。

传统存储阵列采用专用硬件,拓展性欠佳,且硬件成本过重。在高性能计算场景下,传统的存储方案往往选择采用支持 RDMA 协议的 IB 网络降低网络时延,而在 HPDA 这种数据密集型场景下,单一存储集群节点数量往往可达到两位数甚至更多,一台 Infiniband 交换机的成本相当于数台存储节点的硬件成本,在大规模交付的场景下,采用传统的 IB 组网架构需要付出更高的成本。

↑ HPDA 应用的高性能计算需求给存储系统带来挑战

深信服 EDS 存储架构采用了 run to complete 和无锁化编程模型,并优化了各模块之间的数据处理,实现系统内全 IO 栈的内存零拷贝,使整体性能得到了极大的提升。在关键的 IO 路径上,EDS 采用自研的存储通信模块,结合共享内存来实现 IO 路径上的数据零拷贝,减少内存拷贝消耗,降低存储 IO 时延。

全对称分布式架构

深信服分布式存储 EDS 基于全对称的分布式架构,单一分布式存储集群可以横向拓展至数千节点,单一系统容量可拓展至 EB 级别,实现系统性能与容量线性增长,并且随着 HPDA 应用数据规模增大,EDS 平均每 TB 数据的存储成本会越来越低。

↑ 随着存储系统容量增加,SDS 系统性能线性增长的同时,每 TB 数据存储成本逐渐降低

支持 RDMA RoCEv2 协议

为了追求 IO 时延与成本之间的平衡,深信服分布式存储 EDS 创新性地选用 RDMA RoCEv2 网络,将存储节点网络使用 RDMA 协议接入,实现低延迟极速网络传输,有效降低存储系统建设成本。

平均存储 IO 时延在 us 级别

深信服 EDS 存储架构采用了 run to complete 和无锁化编程模型,并优化了各模块之间的数据处理,实现系统内全 IO 栈的内存零拷贝,使整体性能得到了极大的提升。

↑ EDS 关键 IO 流程示意图

3 节点通用 2U 服务器即可提供 6GB / s + 吞吐

结合 RDMA 协议与 NVME SSD 介质,EDS 可以同时发挥 NVME SSD 的性能优势与 RDMA 技术的低时延优势。采用 3 台 aStor-EDS1250 设备,每台服务器配置 2 块 NVME SSD 与通用硬盘,即可提供超过 6GB / s 的性能体验。

深信服分布式存储 EDS 采用通用硬件降低用户存储投入成本,再结合过硬的软件实力激发通用硬件的性能,提高 HPDA 应用数据存取效率,为用户提供高性价比的存储解决方案,助力产业稳健发展。

以上就是本期《信服云黑板报》的分享,关注"深信服科技"公众号,持续获取更多技术干货内容哦!

2022-12-19 17:25:22

相关文章