解决方案

联系云存

地址:北京市海淀区天秀路10号农大国际创业园3号楼4030室

 

服务热线:010-62668505

联系电话:18601298505                13901366418

邮箱:shakx@163.com

华北地区教育行业负责人:15801555166

                16600321361

并行分布式集群存储解决方案

创建时间:2019-08-26 15:13

     云存并行分布式存储MIDAS9000系列是云存科技自主开发拥有自主知识产权的高带宽、高可用、分布式集群存储系统,采用10GbE或40GbIB接口,提供突破性的高性能集群存储系统,适用于高性能计算、海量数据存储、大规模视频监控、大数据分析等应用领域。云存科技的集群存储方案是由CloudStorage操作系统软件和先进的符合行业标准硬件所组成,提供灵活的“按需购买,阶段扩展”的企业级集群存储系统。该操作系统采用多存储节点的并行集群技术,通过千兆,万兆,INFINIBAND等网络模式,组合了存储节点的容量与性能,形成统一命名空间,为前端各种计算集群系统提供高速存储空间和附加的存储功能。

       并行分布式存储架构图:


便捷管理功能及广泛系统兼容

中英文图形管理界面,常用功能使用快捷方式操作,复杂操作使用向导方式引导管理使用,配置简洁方便,轻松实现存储设备各项功能配置和管理。系统的运行状态,各个节点的工作负荷,存储的空间占用情况,性能变化等,所有内容一目了然。支持Linxu、Windows、MAC操作系统,以及基于以上系统开发的计算应用软件,无需任何更改即可访问存储集群。

快速数据自愈及自动故障探测

具有无与伦比的快速自愈能力,当存储系统中硬盘损坏时,数据恢复速度极快,4TB磁盘的数据量仅需26分钟即可恢复完成。系统内置智能故障探测机制,可自动探测并处理存储异常,即使出现宕机、网络中断、磁盘损坏等情况,仍然能够保障数据完整性和数据服务的持续运行。

超级存储性能及高效空间利用

通过分布式切片以及负载均衡技术,充分利用硬盘和网络的性能,构造高效数据传输通道。特有的存储冗余算法,可以大幅提升存储空间利用率,在大于5台存储节点的配置上,可以获得80%以上的空间利用率。

海量存储,在线横向扩展

具备极致的扩容便利性,扩容时完全不影响用户前端业务运行,扩容后系统的性能及容量均是线性增加。最大支持8192台存储节点,存储容量可在线扩展至EB级,可管理文件数量达2000亿,能支持40000台以上客户端并发访问。

  (1)控制器集群体系架构,所有控制器并行承担数据IO、保障系统整体负载均衡,数据分散存储,避免单控制器故障带来的风险和性能的瓶颈,支持控制器在线横向扩展,满足持续增长的容量和性能需求

  体系架构:并行统一存储系统,采用控制器集群分布式全对称架构设计,性能随节点数量的增加线性增加,支持多控制器之间自动负载均衡及故障自动切换功能;

 高可用性:要求系统全冗余,控制器之间必须是高可用配置;元数据、数据采用集群方式部署,支持元数据和数据的分离部署、也支持元数据和数据的融合部署,任何一个控制器出现故障,不影响数据的正常访问;

  横向扩展:支持在不停机情况下,通过向存储系统中增加存储节点的方式实现业务不中断情况下在线动态扩充容量和性能;

         (2)支持NAS/ Object/IP-SAN/ IB-SAN存储接口,提供兼容POSIX接口规范的NAS客户端软件,并且支持SAN、NAS、Object同时运行,满足客户在不同时间、不同地点、不同业务对存储的不同需求,支持Windows、Linux、Unix、Mac OS 等多种操作系统并存的复杂网络环境中,轻松实现跨操作系统的数据存储与共享,另外支持CloudFS Client(Linux Only)/NFS/CIFS/FTP/HDFS/HTTP/WebDAV接口等多种文件共享协议;

(3)支持丰富的主机连接接口,支持1Gb/10Gb iSCSI、40GbInfiniBand主机连接,无缝接入用户现有环境,满足客户对高带宽及高性能的差异化需求

  (4)全面支持Flash /SSD/SAS/SATA各类常见存储介质,模块化的容量扩展模式,支持数据分级存储,满足各类型应用

数据持续保护,业务运行无忧

  (1)支持数据卷映射功能、数据快照功能、快照回滚、远程卷复制(同步/异步)、远程数据复制及恢复、逻辑分区动态扩容

  (2)支持数据副本、数据纠删码、小文件优化处理、自动分层等多种数据冗余保护和性能加速功能,为用户提供高级别的数据保护及容灾功能

  (3)支持全集群Active-Active、Active-Standby、全局热备等控制器工作模式,保障整体系统的高可用,确保数据存取及业务运行万无一失

  (4)通过增加节点或硬盘,无需停机即可提高存储容量;通过移除节点或硬盘,无需停机即可缩减存储容量;整个系统实现弹性容量部署,满足客户对容量的需求

  (5)支持软硬件故障时的数据自动修复,能够实现快速重构,恢复数据,重构速度达到4TB/h,系统可用性达到99.999%

模块化设计,人性化管理

  (1)各主要部件均采用模块化设计,客户按需选择,维护、升级、管理简单方便

  (2)支持数据副本、N+M等冗余模式

  (3)完备监控管理方式,当系统出现异常时,除了通过机器指示灯报警外,可通过邮件等方式将异常状况及时通知管理员

  (4)集中部署,统一管理,整体交付,提供统一的数据管理接口、开放的API、无需客户提供内部互联设备

绿色节能

  (1)全系统选取节能降耗的处理器、芯片组、风扇和散热片等部件,提高系统的能效利用率

  (2)支持在线动态扩容/缩减时数据自动迁移,确保系统按需配置,同时支持Maid磁盘节能技术,降低磁盘能耗,节约开支

  (3)支持自动精简技术,大大提高存储资源利用率

典型应用:

MIDAS9000系列拥有无与伦比的存储性能及可靠性,可以为集群运算系统提供高速、安全的存储空间。典型应用包括:高性能计算、大数据分析、非编媒资、测绘制图、科学计算、环境监测、海洋监测、气象分析;石油天然气勘探、地震局、矿物局、地质局;电视台、广告制作、影视后期、高校;平安城市、平安校园、安防监控、铁路/交通监控等海量数据的高性能业务领域。