论视频系统和大数据图像存储问题.docVIP

论视频系统和大数据图像存储问题 　　摘要：视频图像的采集、传输和存储这三个环节，是大数据结构处理的瓶颈。本文主要通过以视频监控系统为例阐述视频系统和大数据图像的存储问题。 　　关键词：视频系统；大数据存储；问题 　　中图分类号：C37 文献标识码：A 　　一、当前视频系统和存储设备的普遍情况 　　(1)前端使用模拟摄像头、传输线路采用视频线或者双绞线、格式采用CIF或者D1的情形最为普遍。 　　①格式通常采取的是隔行扫描的方式，在通常的清晰度默认值，350线下，一路视频的数据量一小时不超过150M，一天即在3.6G左右。如果设定值为480线、720线，占用的硬盘存储空间还将更大。 　　② D1，即280i (525i)格式，清晰度为720 X 480(水平480线，隔行扫描)，和NTSC模拟电视清晰度相同，行频为15.25kHz经过测算，D1格式视频的数据量相当于CIF(352×288)格式的3.9倍—占用硬盘的存储空间较CIF格式视频增加了将近3倍。 　　(2)硬盘录像机即数字视频录像机；相对于传统的模拟视频录像机，由于使用硬盘录像，故常常被称为硬盘录像机，也被称为DVR。它是一个进行图像存储和处理的计算机系统，具备对语音、图像进行长时间记录和远程监视及控制的功能。 　　DVR集合了录像机、画面分割显示器、云台镜头的控制器、报警控制器等的多种功能，以及网络传输等功能于一体；由于能够以其一台设备的软件控制能力，集中取代模拟监控系统诸多硬件设备的功能，故此在价格上逐渐占有优势。DVR采用的是数字记录技术，在图像的处理、储存、检索、备份以及网络传递、远程控制等方面也远远优于模拟监控设备，是目前的电视监控系统市场上的主流产品。 　　(3)传统的DVR系统采用模拟前端，监控点与中心DVR之间以模拟方式互联，因受到传输距离以及模拟信号损失的影响，监控点的设置受到很大的局限，无法实现远程部署。NVR可通过网络连接IPC(网络摄像机)，可以支撑全网络化架构的视频监控系统——监控点设备与NVR之间可以通过任意IP网络互联，因此监控点可以位于网络的任意位置，不会受到地域的限制:这也是远距离大视频系统未来的发展方向。 　　使用NVR的高清系统，大数据存储的问题更加突出。例如，分辨率为1280 ×720的高清视频，30秒的图像数据占用的存储资源是7.9M，一天为22G；分辨率为1980×1080的高清视频，30秒的图像数据占用的存储资源是22M，一天是63G。如果一个系统中有100个这样的摄像头，按照存储时间为20天考虑，其存储量非同小可。 　　二、视频系统和存储设备普遍存在的问题和解决手段 　　目前的监控存储系统，存储设备使用的硬盘分布于各硬盘录像机内；整个系统开机运行后，所有的硬盘同时连续运转，产生的热量较多，各硬盘录像机的散热条件却参差不齐，这与各硬盘录像机所处的环境有关。在使用的硬盘不多时，其中的问题并不突出，但是，所有半导体器件的参数都与温度有关，例如环境温度的升高会使三极管C、B极间的反向电流升高，会使光敏器件的暗电流有较大的提升，也会使二极管的稳压值发生变化等这些有害因素逐步积累，终将影响电路的正常工作。 　　电子设备在工作的同时，必定要消耗电力能源而产生热量，而过高的热量会使设备中的电子元器件寿命缩短或受到永久损害。随着电子技术的迅猛发展，电子设备过热及其所处的环境温度过高带来的问题愈显突出。大量的事实表明，电子元器件失效的情况会随温度升高呈指数性增加。另外，元器件的发热对周围元器件的性能也有着十分有害的影响。调查显示，50%以上的电子设备故障是由于环境问题造成的，而温度升高是其中最主要的原因。选择磁盘阵列与恒温机柜结合应用的方案，是解决此类问题比较好的一种选择。 　　三、磁盘阵列与视频系统结合应用是有效提供视频文件的技术保障 　　磁盘阵列与视频系统的结合应用是解决大规模图像存储实质问题的主要手段。接下来就以国家图书馆一个较小规模的普通视频系统为例进行阐述。该系统有40台普通的硬盘录像机，共配备了160块单个存储量为2T的硬盘。以一块硬盘的平均无故障运行时间为70万小时计算，160块硬盘的平均无故障运行时间就是4375小时；一年是8760个小时，所以这个系统可能会保持每年两块硬盘的更换率。如果再考虑增加摄像头、备份、容错等业务需求，这个系统的硬盘使用量还会更多，甚至翻倍；如果需要提高图像的清晰度，那么系统的硬盘使用量还会增加。大数据图像的安全、有效的存储，既是系统运行的必要条件，也是系统运行生命周期的整个过程中，有效使用设备和资金的保障。监控系统的建设者和设计者，应该在设计的初始阶段引入对建设和运行情况统一考虑的设计规划环节一一在系统尚在“孕育”中的时候，就引入对其后续使用问题的考虑，从而获得对系统