软件定义的分布式存储优势及应用场景

随着视频高清技术及超高清技术的普及,视频大数据应用场景,如雪亮工程、平安城市、广电媒资、影视制作、视频网站等领域,对存储设备提出了大容量、高读写性能、高可靠性、低延时及可扩展性等需求。针对这样大规模视频数据应用场景,就需要一个技术先进、性能优越的存储系统作为后端数据存储的支撑者。

  目前我们正处于一个新的时代,这个时代被赋予了许多标签:互联网+时代、云计算时代、大数据时代、人工智能时代。


  当前时代的IT系统架构伴随着软件定义的发展,正发生着巨大的变化,作为IT架构核心数据保险箱的存储单元正在面临着前所未有的挑战。前端业务应用规模从数据量、性能、安全性以及应用类型上都有了成倍的增长,传统的存储设备和解决方案很难满足这种大规模应用场景的需求。不同的应用场景产生的数据类型及访问数据的IO模型各不相同,采用软件定义的分布式存储解决方案可以更好的应对目前的挑战。


  首先,我们需要知道什么是分布式存储?


  分布式存储


  分布式存储是软件定义存储解决方案的实现,它是通过软件将硬件进行抽象化管理,将集群全部的CPU资源、内存资源、硬盘资源、网络资源等进行池化,组合成统一资源池,然后通过简单友好的管理界面或API提供给用户个性化的存储解决方案。


  软件定义存储解决方案可以使生产系统在线运行的情况下进行纵向扩展(Scale-Up)或横向扩展(Scale-Out),且存储系统在扩展后可以达到容量与性能均线性扩展的效果。其具有以下特性:


  高性能


  分布式存储系统能够将所有存储节点的处理器资源、硬盘资源、网络资源进行整合,将任务切分给多台存储节点,进行并发数据处理,避免了单个硬盘或设备造成的瓶颈,提升整个集群的处理能力。分布式存储系统具有良好的性能扩展能力,可以满足应用程序对存储性能不断增长的要求。


  高扩展性


  分布式存储系统通过扩展集群存储节点规模从而提高系统存储容量、计算和性能的能力,通过增加和升级服务器硬件,或者指通过增加存储节点数量来提升服务能力。分布式存储系统支持在线增加存储节点,对前端业务透明,系统整体性能与存储节点数量呈线性关系。


  高可用性


  分布式存储系统同时基于硬件及软件设计了高可用机制,在面对多种异常时(如存储节点宕机、网络中断、硬盘故障、数据损坏等)仍可提供正常服务,提高分布式存储系统硬件的可用性可以通过增加存储节点数量或者采用多种硬件冗余机制保证。分布式存储系统多采用副本机制或纠删码机制保证数据的高可用性,副本机制可以提供较高的数据冗余度,但会降低存储系统有效空间的利用率,纠删码机制可以在保证一定数据冗余度的情况下,大幅提高存储系统的有效空间利用率。


  高安全性


  分布式存储系统支持可靠的权限控制及互信确认机制,同时采用私有的数据切片及数据编码机制,可以从多重角度保证集群系统不受恶意访问和攻击,保护存储数据不被窃取。


  分布式的“四高”特性,使得其在高性能计算、大数据视频云及大数据分析等应用场景中有着广泛的应用。


  高性能计算场景


  在如气象气候、地质勘探、航空航天、工程计算、材料工程等领域,基于集群的高性能计算,已成为必需的辅助工具。集群系统有极强的伸缩性,可通过在集群中增加或删减节点的方式,在不影响原有应用与计算任务的情况下,随时增加和降低系统的处理能力。根据不同的计算模式与规模,构成集群系统的节点数可以从几个到成千上万个。这些业务对后端的存储系统提出了新的需求,包括统一的存储空间、高效率的文件检索、高带宽的吞吐性能,高可靠的数据安全保障等。


  大数据视频云应用场景


  随着视频高清技术及超高清技术的普及,视频大数据应用场景,如雪亮工程、平安城市、广电媒资、影视制作、视频网站等领域,对存储设备提出了大容量、高读写性能、高可靠性、低延时及可扩展性等需求。针对这样大规模视频数据应用场景,就需要一个技术先进、性能优越的存储系统作为后端数据存储的支撑者。


  大数据分析应用场景


  伴随着互联网技术及人工智能的发展,各种基于海量用户/数据/终端的大数据分析及人工智能业务模式不断涌现,同样需要充分考虑存储功能集成度、数据安全性、数据稳定性,系统可扩展性、性能及成本各方面因素。


  在数据爆发增长的“数字时代”,软件定义的分布式存储是存储技术高速发展的结晶,并具有着很大的成长空间,必将应用于更广泛的大数据业务场景。

软件定义的分布式存储优势及应用场景

该文观点仅代表作者,本站仅提供信息存储空间服务,转载请注明出处。若需了解详细的安防行业方案,或有其它建议反馈,欢迎联系我们

(0)
小安小安

相关推荐

  • 基于云计算的视频实战应用平台的建设方案和应用

    常州市平安城市视频监控技术已经从联网整合阶段。发展到视频实战深度应用阶段。常州市公安局根据本地的视频实战应用需求,建设了基于云计算的视频实战应用平台。

    2024年1月15日
  • 公安图侦手段分析及应用

    视频建设的不断建设和投入使用,视频图像的分辨率也随之大大提高,有利于扩展更多的监控分析功能。通过引进先进的视频技术,改变传统视频监控的被动性和人为性,减少各类因素造成的监控问题,增强治安监控系统的智能性、可用性,降低监控员的工作强度,提高工作效率。

    2024年4月4日
  • 华为与华尊科技联合发布视频综合应用平台

    近日,在华为全联接大会2018(HUAWEICONNECT)上,华为与视频大数据方案提供商华尊科技联合发布了视频综合应用平台解决方案。它基于华为视频云大数据平台,承载华尊科技视频实战综合应用,通过具有超强算力的GPU服务器实现10倍于CPU的视频解析能力,凭借大数据技术增强视频服务能力

    2024年11月23日
  • 安徽四创雪亮工程解决方案

    以构建立体化公共综合防控体系、拓展公共视频的社会共享服务为目标,基于相关政策和技术规范,整合各类视频图像信息资源,建立跨部门、跨区域的视频服务,拓展政府、民众对视频图像信息的综合应用,形成公共安全信息化支撑的服务体系。

    2024年1月14日
  • 视频云服务+大数据平台设计方案

    视频云+大数据平台包括:视频图像信息数据库(一库)、应用支撑服务平台(一平台)、视频图像解析系统和视频云+应用系统组成。

    2024年1月17日 方案
  • 高新兴视频云解决方案

    视频监控是安防行业的首要技术手段,视频的直观性、客观性、实时性与信息量大是其最大的优势。

    2024年1月14日