APP下载

采用自主架构处理器,龙芯中科推出分布式存储解决方案

消息来源:baojiabao.com 作者: 发布时间:2024-05-09

报价宝综合消息采用自主架构处理器,龙芯中科推出分布式存储解决方案

随着云计算、5G、人工智能等新技术迅速发展,人工智能业务模式的不断升级,互联网、视频应用对大数据处理要求的不断提升,需要一套技术先进、性能优越、具备高可靠性、扩展性的存储系统方案作为后端数据存储的支撑,分布式存储技术应运而生。

与传统网络存储系统采用存储服务器集中存放数据的方式不同,分布式存储系统将数据分散存储在多台独立的设备上,多台存储服务器分担存储负荷,系统还具备冗余备份、数据纠错等功能,提高了系统的存储效率及可靠性。此外,分布式系统弹性扩展的技术优势,可支持存储容量的动态管理,能够满足了大规模存储应用的需要。

龙芯中科作为行业领先的自主 CPU 设计研发企业,2021 年推出了龙芯首款 16 核服务器专用的 3C5000L 处理器芯片。龙芯 3C5000L 服务器芯片,主频 2.0-2.2GHz,16 核,支持 2-4 路多片互联,具备架构自主、性能卓越、生态兼容和安全融合的特点,性能较 3B4000 提升了 7-8 倍。目前基于龙芯 3C5000L 处理器的多款分布式存储产品已经在项目中得到应用,可有效满足大型数据中心、云计算中心的业务应用需求。

基于 3C5000L 处理器的 2U 及 4U 机架式服务器

龙芯分布式存储系统解决方案由龙芯分布式存储设备和分布式存储管理系统两部分组成。其中,分布式存储设备采用基于龙芯 3C5000L 的存储服务器,为上层应用提供稳定可靠、高效环保的数据存储环境;作为数据处理中心的分布式存储管理系统具有良好的伸缩性,可将各类存储资源组织起来,构建分布式存储池,并为上层应用提供文件、块、对象不同形式的数据操作接口,以便满足业务对结构化、非结构化数据的存储、管理要求。

为满足不同应用需求,龙芯分布式存储设备主要包含基于 3C5000L 处理器的 2U 及 4U 机架式服务器。

龙芯分布式存储管理系统支持 Ceph、Gluster、Beegfs 等多种文件系统及 iSCSI、RBD、NFS、CIFS、FTP、S3 / Swift 数据访问接口,可为业务系统提供全面的数据访问接口,满足结构化、半结构化、非结构化数据处理要求。

针对非结构化数据的飞速增长,龙芯分布式存储管理系统为不同应用提供从几十 TB 到数百 PB 的存储空间,单一文件大小超过 TB 级别。对于图片及视频等非结构化数据,支持数据压缩、添加水印、在线播放等功能,还可通过加密通道实现数据保护,通过多版本及多站点备份,实现数据的容灾访问。

龙芯分布式存储管理系统主要功能及特点

龙芯分布式存储管理系统拥有高性能的文件管理能力、强大的扩展能力,具备全局数据镜像保护及数据分级存储等功能,还可根据不同存储策略实现数据故障检测、系统在线扩容、容量限额及文件镜像保护等高级功能。

支持数据纠删及备份:

龙芯分布式存储管理系统提供数据副本和数据纠删两种数据保护策略,支持 12 级数据副本,可保障数据的完整性;数据纠删支持 N+M 的数据容错方式,可支持任意纠删比例的数据容错。

支持 WORM:

Write Once Read Many,是一次写入技术,即文件被写入完成后即可通过去掉文件的写权限,使其进入只读状态,在该状态下文件只能被读取,无法被删除、修改或重命名。通过 WORM 技术存储的数据,将不会因各种意外丢失或被修改,保证了企业对重要数据的长期存储,数据文档存储更安全可靠,可满足企业或组织对一些重要的业务数据安全存储的需求。

支持远程复制:

提供全量、增量方式异步数据复制功能,将龙芯分布式存储系统内的数据同步至远端的龙芯分布式存储系统或其他第三方存储备份系统,方便进行数据的异地备份和恢复,提升数据可靠性。

支持跨站点及节点级的安全防护:

多资源池隔离,不同资源池设置不同冗余级别,保障部分业务独享优质硬件资源;硬盘级、节点级、机柜级故障域,最大限度降低硬件故障对业务的影响;并行数据重建,1TB 数据恢复时间 30min 以内,是传统 RAID 的数十倍,降低数据丢失风险;高性能快照保护,有效避免"软故障"灾难。

支持数据精细化管理:

数据分类分级是数据安全精细化管理的前提,针对相同数据不同场景、不同数据相同场景下的个性化管控,实现数据在传输、存储、处理、交换、销毁等数据生命周期下的有效存储。当数据属性、部署场景发生改变时,对应的存储策略也随之动态改变。

支持数据生命周期管理:

龙芯分布式存储管理系统针对数据生命周期管理要求设计数据的存储时间,超过指定时间则自动迁移到准备好的低成本存储中,当存储后台判断数据迁移完成之后,则自动删除已迁移过去的数据,释放空间;支持针对冷存储中数据的生命周期管理,比如根据策略可自动删除数据;支持自定义的数据访问权限;支持文件系统接口、对象存储接口数据的生命周期管理,提供到期删除模式、到期双向删除模式、不删除模式等。

龙芯分布式存储管理系统优势

・性能卓越:单套系统支撑上万台渲染服务器并发读写,支持并行存储,自动分级,大幅提升性能,单台存储最高提供 1GB / s 以上带宽;

・超大容量:高密度设计,单台存储最大支持容量 360TB;Scale-out 横向扩展至 1024 个节点;单套系统最大支持 300PB;单个文件最大支持 32TB;

・安全稳定:支持硬盘级、节点级、机柜级、数据中心级冗余;支持快照、异地容灾、副本、纠删等多种数据保护方式;支持在线自动重建,多节点同时重建数据丢失部分,比 RAID 快 10 倍以上,不影响前端业务;

・广泛兼容:支持文件、块、对象接口类型;支持 Ceph、Gluster、Beegfs 存储系统;支持 CIFS、NFS、HDFS、FTP、HTTP、POSIX、iSCSI、S3、Swift 等多种协议。

2022-09-13 16:43:24

相关文章