根据IDC报告,未来十年全球数据将增加50倍,由2012年2.8ZB达到2020年的40ZB(1ZB=1亿TB)。在数据量呈现几何级数增长同时,我们也发现,数据来源及获取的渠道越来越多。数据模型也从最初的结构化数据为主发展到半结构化或非结构化数据占比越来越高,数据关系也由简单发展到复杂……
这一系列的变化催生出大数据时代,一个将会对我们生活环境、工作习惯和思维方式带来强烈冲击的变革时代。其背后需要的是能对海量数据进行分析、信息提取,能服务于民生,促进各行业发展的提供商。
大数据时代到来
“让犯罪止于发生之前”是大数据时代新型平安城市建设的指导思想
“昆明火车站事件”、“乌鲁木齐火车站事件”、“广州火车站事件”等一个个恶性事件接踵而至,让幸福的家庭在暴徒的袭击下,瞬间崩然倒塌。严峻的城市治安态势,引发我们对平安城市建设的深入思考,保障城市“平安”,这是现代城市的基本责任。平安城市经历了数字化、网络化、高清化、智能化的发展阶段后,将形成广覆盖、大联网、高智能的格局,在应用层面具有强烈的大数据处理需求来消化、利用海量的监控信息,辅助实现事前预警。
云直存(CDS)技术
宇视科技深刻理解视频领域用户对未来云计算和大数据的在平安城市中的建设需求,引领创视频安防监控行业新推出融合战略,通过计算、存储、网络、虚拟化、视频监控等技术创新和融合,采用开放架构与第三方系统融合,实现精简部署、精简运维和精简管理,快速满足不断变化的业务需求,提升业务工作效率,进而实现“云监控、易安防”。在非结构化/半结构化存储领域,CDS(CloudDirectStorage)系列推出了视频云存储,为平安城市量身保驾护航。
CDS云直存技术,出身于“IT云存储”,但最主要的特点还是无任何文件系统的继承,这点对于定期进行循环写的视频存储系统里尤为重要。文件系统的任何文件的频繁删除会导致大量的文件碎片的产生,越来越多的文件碎片会导致硬盘磁头的在各个区域的频繁读取,性能的降低及文件系统稳定性的降低。
CDS云直存技术的无文件系统设计,摒弃了文件系统的缺点,能大大提高处理性能和稳定性,云存储系统直接和前端直接建立基于协议的“一对一”交互,不通过任何其他的设备或模块进行转发或处理。
云直存(CDS)特点
虚拟化、统一资源。视频云存储CDS系列产品,屏蔽所有硬件个性化差异,将所有存储节点进行虚拟化,对外提供统一存储资源池,针对不同的存储需求,提供不同等级的存储服务。
·多备份。根据数据的不同重要等级,下发不同的配置策略,能对重要数据进行双倍或多备份。
·空间自由伸缩。自由的根据不同的存储时间需求,匹配对应的存储空间。
·智能路由。根据路由信息,计算最短存储路径,采用就近存储,大大节省网络带宽。
高密度,模块化结构设计。CDS视频云存储系列,采用模块化设计,所有节点均配置双机或集群冗余,针对业务可实现紧密融合和无缝切换;单机柜(42U)可最大部署20个存储型服务器节点(配套384HDD),单存储节点可支持16/24/36/48个3.5英寸SATA/SAS硬盘或2.5英寸SATA/SAS/SSD硬盘和2个2.5英寸SATA硬盘,存储容量高达1.5PB。
安全、可靠的系统设计。CDS的云存储模块:CX系列:宇视科技秉承十年的存储技术积累,采用Intel系列处理器平台,内存支持ECC纠错,计算系统运行高效稳定;支持RAID0、1、10、5、50、6、60,保障存数数据安全性;支持数据保险箱业务,保障数据的一致性;支持业界最快10秒的RAID数据恢复速度;支持业务部署快捷;支持主要芯片元器件的状态查询及自恢复,如需迁移,可整机柜一体化迁移,迁移后的系统可靠性将不受丝毫影响。所有模块冗余设计,高可靠无源背板,系统无单点故障,保障系统稳定运行。
高效节能的计算系统。存储及服务器节点支持CPU调频调压、硬盘休眠、功耗封顶等宇视的主动节能技术,并能自动根据数据的访问频率进行数据分层,(SSD/SAS/SATA)减少运行功耗,同时采用NGN的整体架构,将数据流和指令流分流,各模块各司其责,大大节省服务器设备,将系统能耗降到最低(最高可降低45%)。
快捷部署,丰富管理。工厂预安装、一体化机柜式交付,现场交付效率大幅提升,业务快速部署。所有网络可达的节点能进行统一管理和运行状态监控,存储节点具备远程操作、来电自开机、远程开关机等丰富管理功能,便于管理,业务运营更轻松。
打破传统思维,支持多块硬盘同时故障的超级RAID5技术。目前,业界普遍采用传统的RAID技术来保护数据,但传统的RAID技术有其固有的不足之处。以RAID5为例,当一个RAID组中同时有两块磁盘发生故障的时候,传统的RAID便会进入到失效模式,一旦进入到这个模式,整个RAID上的数据将无法读出,数据也无法继续写入,如果要想恢复RAID的读写功能,必须重建RAID组,代价则是数据全部丢失。宇视超级RAID5技术,对硬盘局部故障进行“粗线条”处理,并在RAID层设计条带remap区域,能同时支持多块硬盘同时故障的超级RAID5,且不影响业务的正常运行。
宇视科技不仅仅能针对硬盘局部故障进行最人性化的处理,还能对拔出的RAID组的硬盘,实现独有的LUN不失效技术,在线的数据仍可读出。
结束语
随着高清视频监控的快速发展以及在平安城市领域的大规模应用,高清视频的传输、转发、存储及应用对配套硬件平台提出了严峻的挑战,系统的稳定性、可靠性及实战应用成为公安用户关注的焦点。CDS视频云存储方案,能实现一体化交付、统一管理、节点在线热插拔等特点,大大简化IT,实现精简部署、精简运维和精简管理,快速满足不断变化的业务需求,提升业务处理效率。基于视频图像的云计算技术、云存储技术,通过将大数据技术和视频监控技术的完美融合,能为我们的平安中国保驾护航。