数字经济时代,数据已成为新的外围生产因素。特地是在航空航天、气象迷信、AI 主动驾驶及生命科学等畛域,数据出现指数级增长,以数据密集型为典型特色的高性能数据分析(HPDA)开始呈现。
深服气分布式存储 EDS 不仅能够满足计算密集型利用性能需求,也解决了传统存储计划拓展性有余与老本过高的问题。
传统存储阵列采纳专用硬件,拓展性欠佳,且硬件老本过重。 在高性能计算场景下,传统的存储计划往往抉择采纳反对 RDMA 协定的 IB 网络升高网络时延,而在 HPDA 这种数据密集型场景下,繁多存储集群节点数量往往可达到两位数甚至更多,一台 Infiniband 交换机的老本相当于数台存储节点的硬件老本,在大规模交付的场景下,采纳传统的 IB 组网架构须要付出更高的老本。
↑ HPDA 利用的高性能计算需要给存储系统带来挑战
深服气 EDS 存储架构 采纳了 run to complete 和无锁化编程模型 ,并优化了各模块之间的数据处理,实现零碎内全 IO 栈的内存零拷贝,使整体性能失去了极大的晋升。 在要害的 IO 门路上,EDS 采纳自研的存储通信模块,联合共享内存来实现 IO 门路上的数据零拷贝,缩小内存拷贝耗费,升高存储 IO 时延。
全对称分布式架构
深服气分布式存储 EDS 基于全对称的分布式架构,繁多分布式存储集群能够横向拓展至数千节点,繁多零碎容量可拓展至 EB 级别,实现零碎性能与容量线性增长,并且 随着 HPDA 利用数据规模增大,EDS 均匀每 TB 数据的存储老本会越来越低。
↑ 随着存储系统容量减少,SDS 零碎性能线性增长的同时,每 TB 数据存储老本逐步升高
反对 RDMA RoCEv2 协定
为了谋求 IO 时延与老本之间的均衡,深服气分布式存储 EDS 创新性地 选用 RDMA RoCEv2 网络 ,将存储节点网络应用 RDMA 协定接入, 实现低提早极速网络传输,无效升高存储系统建设老本。
均匀存储 IO 时延在 us 级别
深服气 EDS 存储架构采纳了 run to complete 和无锁化编程模型,并优化了各模块之间的数据处理,实现零碎内全 IO 栈的内存零拷贝,使整体性能失去了极大的晋升。
↑ EDS 要害 IO 流程示意图
3 节点通用 2U 服务器即可提供 6GB/s+ 吞吐
联合 RDMA 协定与 NVME SSD 介质,EDS 能够同时施展 NVME SSD 的性能劣势与 RDMA 技术的低时延劣势。采纳 3 台 aStor-EDS1250 设施,每台服务器配置 2 块 NVME SSD 与通用硬盘,即可提供超过 6GB/ s 的性能体验。
深服气分布式存储 EDS 采纳通用硬件升高用户存储投入老本,再联合过硬的软件实力激发通用硬件的性能,进步 HPDA 利用数据存取效率,为用户提供高性价比的存储解决方案,助力产业持重倒退。
以上就是本期《服气云黑板报》的分享,关注我,继续获取更多技术干货内容哦!