基于视差分析的立体视频对象分割-信号与信息处理专业论文.docxVIP

上海大学硕士学位论文 上海大学硕士学位论文 基于视差分析的立体视频对象分割 摘要 随着通信和信息处理技术的发展，大量数字化的视频服务需求不断涌现，如： 数字电视、远程会议、视频电话和交互式多媒体等。这些伴随着大数据量的应用 和服务需要更先进的数字信号处理技术，以进行更高效的传输和存储。视频对象 分割就是其中一种技术。 现有的基于时域和基于时空的视频对象分割技术，还不能对语义对象进行精 确分割。而在立体视频序列中，可以获得接近于语义对象定义的深度(视差)信 息，十分适合用来分割视频对象。 本文在对各种视差估计方法研究的基础上，提出一种基于边缘信息的二级立 体匹配方法，根据对象边缘特征在匹配过程中选择适当尺寸的匹配窗口，并对匹 配搜索过程进行优化。此外，针对视差估计过程中的遮挡问题，本文提出一种基 于运动信息的遮挡补偿法，利用相邻帧之间对象运动与遮挡的关系对遮挡区域的 视差进行补偿，最终得到较精确的视差场。该视差场是进行视频对象分割的重要 中间信息。 通过视差场分割，可大致获得视频对象，但由于视差场分割结果一般在对象 边界处不够精确，需要依靠时空分割结果进行修正。本文提出的变化检测算法在 检测过程中根据己获得的视差场分割结果，在相邻帧中把对应于各个视差分割对 象的区域单独进行运动变化检测。然后，再融合边缘检测对视差场分割结果进行 修正。实验结果表明，上述算法得到较精确的视频对象。 关键词：对象分割，视差估计，遮挡，变化检测，边缘检测。 !塑查兰翌主竺竺堡塞 !塑查兰翌主竺竺堡塞 苎主塑鲞坌堑竺皇竺型塑翌塞坌型 Abstract With advances in communication and information processing technologies，a lot of digital applications and services emerging such as：digital TV,teleconference， videophone and interactive multimedia．These diversified applications and services with large amount of data demand more advanced digital signal processing technologies for efficient transmission and store，Video object segmentation is one of these technologies． The existing algorithms of motion—based and spatiotemporal segmentation Can not segment semantic objects well．In stereoscopic video sequences，it is capable to get depth／disparity information which is close to the definition of semantic objects． Thus，it is better way to segment video objects based the analysis of disparity． Research on the existing methods，a two-step disparity estimation method based the edge Nmcture is proposed．In the process，our algorithm chooses the suitable size of match window according to the edge characteristic of objects and optimizes the search route of match．Otherwise，an occlusion compensation method based on motion information between adjacent flames is presented．With these steps，precise disparity map creates at last，which is helpful in．formation to object segmentation． Approximate video o