这是一个大数据的时代大数据时代的4V特征Volume海量数据从TB级别,增长到PB级别Variety数据种类繁多有各类文本、图片、视频等数据,而且非结构化数据越来越多Velocity实时性海量数据需要快速的处理和检索Veracity真实准确利用数据挖掘和分析得出真实准确的信息大数据时代,对存储系统提供更高要求大容量高效率高可用大数据时代,现有存储系统面临的难题以智慧城市的建设为例……①海量数据存储,如何统一管理和统一调度数以万计的监控点,存储容量已经达到PB级别智能分析抽离出的图片、文字、摘要视频等,数据种类多种多样
白色小型车沪FW6461逆行闯红灯红色上衣红色小型车人员聚集告警人脸抓拍图片黄色衬衫行车轨迹北纬31°
3′东经120°
6′除视频监控数据外,各类应用系统的数据也需进行融合移动警务图像资源信息库车牌信息数据库移动警务人员信息数据库移动警务在并发读写时,存储设备的性能瓶颈在控制器或CPU处理能力上
为提升并发处理能力,必须不断的进行硬件升级
②大容量并发读写,设备性能成为瓶颈存储设备300路高清存储设备200路高清存储设备100路高清单台最大并发处理能力升级CPU升级内存③设备故障须及时修复,维护成本激增硬盘存储设备硬盘硬盘硬盘硬盘硬盘硬盘硬盘热备硬盘硬盘硬盘RAID硬盘硬盘硬盘某块硬盘发生故障时,例如RAID5,只允许设备中有一块硬盘失效
而RAID恢复时间往往需要十几个小时,期间再坏盘,就无法恢复了
因此,需要立即更换或修复故障硬盘
存储设备3存储设备2存储设备1某台设备发生故障时,虽可以用负载均衡技术分担给其它设备,但需要立即更换或修复故障设备,否则存储于其中的数据无法读取
故障故障容量达到“PB”级别,维护就成为最大的难题NAS存储设备NAS存储设备NAS存储设备卡口平台监控平台IPSAN存储设备IPSAN存储设备IPSAN存储设备图像资源数据库NAS