视频超分辨率重建技术综述.pdfVIP

±国情息与电子I程第口届日口川省电子学会目光*会镕十i届学术年会论文瘫 视频超分辨率重建技术综述+ 何小海昊媛媛陈为龙卿粼波 四川大学电子信．E-学院图像信息研究所四川成都610064 摘要摄像机敲取低分辨毕Ⅷ颤是一个!维目窄采样过程．其伴肪T窄闻高频信息的丢失U ＆运动模糊、运动混叠现象∞产生。视频超分辨牢重建是种能有敛M提高视频时问分辨牢和空间 ”辨卓的方法．B＆＆*算机槐t和目像*m等顿域d起T广泛关沣。奉女首先详细地阐述Tm额 超分辨串苹建研究∞概念自Ⅱ要性，#较争呵地【口』顾r超分辨车技术《年米白勺牧E协程，然目对视 频超分辨率重《中的美键问题m行T较为W^地分析．指出7自夸Ⅲ究难点Ⅻ今后的研究方自+最 后对税额超j}辨率重建的JH用前罱进行了Ⅸ《。 关键目税频重建空问超分辨车目目超*辨$帧目E准时卒目齐 1 SI言 随着CCD和CMOS图像传感器的E速发展，数字视频摄像技术卧及数字视{顷处理技术被广泛 运用到数字电视、网络播放、视频监控、医学诊断、交通管理等与人们生活息息相芙的领域．井H 成为了宁航、遥感、制导、预警以及犬文撵测等军事、科研领域十水可缺少的技术。近年来．人们 对视频质韫的要求不断提高，希望摄像机能捕捉到受多的动态信息录J更多的细节信息，换而言之， 就是希望获得更高空问分耕率和时问分辨率的视频。然而．摄像机的卒问分辨率和时间分辨率是有 限的，由丁幽像传感器的空间密度限制丁视频中可观察到的物体最小空间尺寸，同时，在视频采集 的过程中，由于光的像若、大气扰动、i薹动、散焦、欠采样和系统噪声等因素X会引入模糊，囡此 视频的空问分辨率有限。视频的时间分辨率则取决于摄像机的拍摄帧率和曝光时间．这决定了视频 中能正确观察到的动态事件的盛快变化速度。如图ln)所示，在对网球比赛进行拍摄时，网球和球 拍存在严重拖尾和变形．如幽lm)所示．在对一个^快速摆动日历册的过程进行拍摄时，日历册变 得十分地模糊。如图2所示，由丁采集帧率过低，抽摄得到的小球是在做直线运动而不是真实的正 弦运动．这就足运动棍叠现象。 辫籍 (a}楼自∞H球々球}白 (bJ横枷的U所m 目I运动模糊现象』‘意图 ：篙；；：：i黔篙鸶謦留默6浆16臻攫裂徽麓裟瑞紧1嚣2。。。 028·85“2％6{#^028 E-m11=Ⅲ＆ⅢⅢ“d∞ +Ⅵ颇超n辨串m建技术％* ，。婶 (a)按E弦轨m4动的球． (”咀低帧卑捕捉到的球的瞰像序列 捌2运动％需现象4：意圈 如何提高视颠的时窀分辨率成为了一个亟特解决问题。由于光的衍射极限的存在以t受工艺水平 的限制，通过改进硬件设备米提高成像质付的难度较人，实现起来比较幽难。闪此，通过数字图像 处理技术米提高视频分辨翠既1t约成本叉具宵可实现性，一种行之有效的方法就是超分辨牢重建技 术。该技术建立在鸯51折延拓理论、信息硅加理论以及非线性操作理论的基础L．利Ⅲ一个或多个低 分辨牢视频的互补信息．对成像过程中损失掉的部分高额细节信息进行复原，重建{¨一个具有蜓高 时间和空问分辨率的视频。如剐3所示．性敬(a】啦】(cXd)均为采样帧率为25帧／秒的4个观频序列， 母帧视频瞄像的空问分辨犁为400·400．H庄计始采集时问h存在筹异。通过多视频时间超分辨率 重建，可咀得到时间分辨牢摊高到75帧，砂的视频(e}，通过多视频宅M超分辨率重建．可以得到空 间分辨率提高到800·800曲视频(O。视频超分辨章技术已成为近年米的研究热点，在计算机视觉和 图像处理等领域引起了广泛黄注”“。 —吉——_卜—=_古 —专——1■—7苷 (c) fd) Ic) 圈圈图