高端存储系统技术发展及展望(下篇)

浪潮新一代高端存储系统软件由基础操作系统、核心IO处理子系统、高可用监控子系统、管理子系统四部分组成,其中核心IO处理子系统又分为存储池层、缓存层、IO调度和数据复制层、存储协议服务层。通过层次化和模块化设计,隔离各层内部处理逻辑和业务,为实现系统可靠性和可扩展性提供良好基础。

【安防在线 www.anfang.cn】
  浪潮新一代高端存储系统软件由基础操作系统、核心IO处理子系统、高可用监控子系统、管理子系统四部分组成,其中核心IO处理子系统又分为存储池层、缓存层、IO调度和数据复制层、存储协议服务层。通过层次化和模块化设计,隔离各层内部处理逻辑和业务,为实现系统可靠性和可扩展性提供良好基础。

  基础OS:系统高效能和可靠性的基石

  基础OS提供内存管理、进程管理、文件系统、设备驱动,浪潮高端存储系统软件对基础操作系统进行了精简和优化,打造出更适合于存储系统IO流处理的操作系统,其中就包括对SCSI设备子系统的优化:优化处理磁盘SCSI命令异常返回值,识别坏扇区、传输故障等不同状态,从而执行相应修复措施,有效提高磁盘使用率和可靠性。

高端存储系统技术发展及展望(下篇)

  核心IO子系统:层次化的系统存储服务核心

  IO子系统实现对后端数据存储资源(磁盘)的组织管理、保护、缓存和按照开放存储协议标准(FCP/iSCSI)提供访问服务,是该系统核心部分。从建立在磁盘设备之上的存储池层到主机存储协议层,核心IO子系统分为:存储池层、缓存层、IO调度层和数据复制、存储协议服务层。

  存储池层: 大容量虚拟化存储资源服务层

  存储池层将磁盘数据分块,按负载均衡、离散分布原则进行组织,当单个盘失效时,智能计算热备块在池中的分布,使用多块成员盘进行重构,大大提高坏盘重构速度,避免传统单盘写入性能瓶颈造成RAID重构时间过长带来的数据可靠性风险。在可靠分布式RAID基础上,将数据进一步分块虚拟化,形成逻辑卷,支持元数据多副本保存和跨控制器镜像保护,保证数据可靠性。该虚拟化支持将数百块磁盘组成一个存储池,容量可达到PB级别,并实现自精简、分级等高级功能,当容量扩展时,支持数据块重新离散分布和负载均衡,为客户提供高效的存储空间使用率和高可扩展性。

  缓存层: 性能和数据安全性的核心保证

  缓存层提供了IO数据的全局缓存和跨控制器镜像功能,并为保证局部LUN访问性能进行分区缓存。该层实现数据智能预读取、数据缓存、和集中顺序写入存储池,是保证和提高系统IO性能的关键。全局缓存使任意存储池可使用系统所有缓存,并根据各引擎本地存储资源访问压力调整缓存分布,保证系统整体性能。缓存分区功能则为指定存储资源分配固定缓存,保证关键业务的性能。

  IO调度和数据复制层:实现多引擎联合以及跨物理部件数据保护容灾

  IO调度层接收来自存储协议服务层的读写命令,根据LUN数据缓存所在的控制器进行调度转发,以及提交给数据复制模块,实现多控融合和数据复制容灾保护。IO调度层将数据复制功能(快照、克隆、镜像和远程复制)的流程高度抽象和统一化,实现多功能并发调度处理,提高在多重复制保护时的并发,降低处理响应时间,保证主机IO业务的性能稳定性。

  而数据复制子模块,从IO调度层接收IO事件,实现快照、克隆、镜像和远程复制等数据复制功能,提供跨磁盘、跨磁盘柜、跨系统等高级数据保护功能。在性能方面,数据复制功能涉及数据的大量读写转移,带来更大的IO压力,本系统实现依赖快照、克隆,任意数量快照克隆情况下对源卷写操作只需一次复制拷贝,并且支持将快照克隆目标卷建立在不同于源卷的存储池上,有效降低数据复制保护对系统业务性能的影响。

  存储协议服务层:提供可靠数据服务和适应各主机应用

  该层面向主机服务器客户端,提供存储协议服务层提供SCSI SAN服务,配合多控制器和多引擎硬件系统,本系统提供了多达数十上百的主机端口进行访问;通过实现数据读写、集群锁定、SCSI任务管理、ALUA(非对称逻辑单元访问)、拥塞处理、故障异常处理反馈等功能,配合客户端多路径软件、集群软件,实现对数据最优链路访问性能和可靠性。

  高可用监控子系统:监管系统健康状态和业务连续性

  该子系统建立在控制器之间冗余可靠的互联通信基础上,形成对系统所有控制器和引擎的状态监控,统一协调处理处理磁盘链路失效、控制器失效等异常事件,并为系统维护如更换部件、控制器提供支持。该子系统全面监控冗余部件、存储资源和服务健康状态,对异常事件状态进行自动处理,并记录日志和告警以通知管理员及时检查和处置,其中对于磁盘失效、JBOD链路失效、单控制器失效等单点故障,系统可通过冗余部件进行自动修复,保证业务和数据可靠性。

  管理软件子系统:统一易用性管理的接口

  管理软件子系统是本系统管理的接口,在现代企业IT设施日益增多,管理工作量和复杂度日益提高的情况下,系统的管理维护效率与系统的服务质量密切关联。本系统实现统一界面和终端管理,简化系统管理和提高维护效率,并扩展支持标准SMI-S、OpenStack等统一管理协议和接口。该管理软件子系统由管理客户端、管理服务器、管理代理组成,采用面向对象思想,统一所管理对象逻辑和方法,实现集中系统管理和监控,使客户使用本系统进行配置管理和维护的易用性大大提高。

  浪潮新一代高端存储系统软件提供完整的基础数据复制保护功能、可靠而虚拟化的存储池、以及自精简、分级等高级特性,结合高规格硬件,联合多控制器和引擎提供高性能、可靠性,以适应当今企业级应用需求。

该文观点仅代表作者,本站仅提供信息存储空间服务,转载请注明出处。若需了解详细的安防行业方案,或有其它建议反馈,欢迎联系我们

(0)
小安小安

相关推荐

  • 希捷携手首云,打造视频监控数据归档方案

    首云冷云存储的核心硬件采用了希捷ExosE4U106高密度JBOD,希捷4U106采用全冗余架构设计,采用希捷独有的抗震减噪技术,4U空间可配106块磁盘;机箱提供管理接口,提供磁盘端口上下电等功能,大大降低了US3归档存储的占地、能耗和运维管理等投入。

    2024年1月29日
  • 高清智能“云”安防 监控云存储技术浅析

    高清和智能应用于安防行业越发广泛,业界就已经把如何存储解决大数据量的问题提到了研发攻关重点。由于IT行业云技术的较快发展与应用,很多企业为了对数据进行有效的管理,于是就引入了云的概念,云储存便开启了它奇幻漂流之旅。云储存作为安防发展的重要技术根据,为安防行业发展铺路。

    2024年4月10日
  • 云存储技术解决视频监控风险及碎片问题

    面对视频监控系统中大量的数据和应用需求,网络存储技术找到了新的用武之地。未来视频监控后端设备的发展方向,除云存储之外,智能存储概念正在深化。

    2024年4月10日
  • 浪潮发布新一代G5存储 助力企业运筹决胜新数据时代

    多年来,浪潮一直聚焦存储技术的研发与解决方案的创新,本次大会首次提出“云存智用,运筹新数据”的全新存储愿景,是浪潮十几年来存储理念的一次重大升级。浪潮存储产品线总经理李辉表示:“新数据时代中产业形态和需求不断升级。浪潮存储认为作为领先的IT厂商,只有先通过存储平台实现了‘灵活适配并满足云环境需求’、‘支持并面向智能应用发展’以及获得‘共享、管理及挖掘数据价值’的能力,以‘云存智用 运筹新数据’,才足以助力企业迎战时代大潮,实现业务质效跃升。”

    2024年1月27日 资讯
  • 同有为平安城市构建融合数据存储解决方案

    导读:该方案将大容量、高密度的硬件与创新优化的软件深度结合,成倍提升存储容量的同时,解决了海量存储带来的带宽压力;数据分层技术的完美应用更让安防大数据带来的海量数据处理与整合难题迎刃而解。

    2024年1月19日
  • 浅谈大数据存储与瓶颈及应对之策

    但是如何有效、快速、可靠地存取这些日益增长的海量数据成了关键的问题。传统的存储解决方案能提供数据的可靠性和绝对的安全性,但是面对海量的数据及其各种不同的需求,传统的解决方案日益面临越来越多的问难,比如数据量的指数级增长对不断扩容的存储空间提出要求,实时分析海量的数据对存储计算能力提出要求。

    2023年9月16日