沉浸式视频对象融合技术研究-计算机技术专业论文.docx

湘潭大学 学位论文原创性声明 本人郑重声明：所呈交的论文是本人在导师的指导下独立进行研究所 取得的研究成果。除了文中特别加以标注引用的内容外，本论文不包含任 何其他个人或集体已经发表或撰写的成果作品。对本文的研究做出重要贡 献的个人和集体，均已在文中以明确方式标明。本人完全意识到本声明的 法律后果由本人承担。 作者签名： 日期： 年 月 日 学位论文版权使用授权书 本学位论文作者完全了解学校有关保留、使用学位论文的规定，同意 学校保留并向国家有关部门或机构送交论文的复印件和电子版，允许论文 被查阅和借阅。本人授权湘潭大学可以将本学位论文的全部或部分内容编 入有关数据库进行检索，可以采用影印、缩印或扫描等复制手段保存和汇 编本学位论文。 涉密论文按学校规定处理。 作者签名： 日期： 年 月 日 导师签名： 日期： 年 月 日 摘 要 随着我国社会经济的快速发展，留守儿童已经成为我国面临的一个重要的社 会问题[1] ，如何解决留守儿童教育 和成长过 程中的 亲情缺失，给留守儿童 创造更 多的和更加贴切的亲情交流， 成为了目前 社会各界极为关注的一个问题 [2] 。远程 亲情交互系统是近年发展起来的一种新型的交互方式，其打破了传统的语音视频 交互方式[3] ，采用沉浸式视频对象 融合技术 ，让交互双方可以产生身临其 境的交 互体验，极大的提升了交互效果，是解决我国目前留守儿童 亲情缺失的一种非常 可行的方法[4] 。 但是，在视频对象融合过程中，由于计算量非常大，处理极为复杂，往往很 难达到理想的交互效果，而这其中主要是由于算法的实时性以及在对视频帧处理 过程中很难保持视频的时序性，导致沉浸式视频交互过程中经常出现画面卡顿、 光斑和闪烁等现象，严重的影响了交互体验。因此，如何解决沉浸式视频对象融 合的实时性和时序保持问题也成为了沉浸式视频交互领域研究的重点。 针对这一 问题，本文从视频对象融合的时序性保持和视频对象融合的实时性两个方面出发 进行深入研究研究，并取得了一定的成效。 本文主要研究内容如下： 1）针对沉浸式视频对象融合过程中的时序保持问题，提出了一种基于时序一 致的沉浸式视频对象融合方法，该方法通过在视频对象融合过程中采用自适应帧 间高斯滤波算法对视频对象深度信息进行平滑处理，以保持视频对象时序性，提 高融合后的显示效果。 2）针对目前沉浸式视频对象融合算法实时性差问题，在本文提出和设计的基 于时序一致的沉浸式视频对象融合方法基础上，基于 GPU 的 CUDA 并行化技术， 对该算法进行了并行化设计和实现， 实现了对前景恢复、基于几何块结构模型的 深度计算和基于邻域微结构的半监督学习深度计算三大模块的 GPU 并行化处理， 有效的提高了基于时序一致的沉浸式视频对象融合算法的 实时性。 3）采用 Kinect 传感器、DirectShow 和 AnyChat 技术在本文提出的并行算法 的基础上完成了一个远程沉浸式视频交互系统的设计，从系统运行效果上验证了 本文设计的算法在实时性和时序保持上的提升。 关键词：视频对象融合；时序一致；GPU；并行；沉浸式视频交互 Abstract With the rapid development of Chinas economy, the left -behind children has become an important social issue facing our country, how to solve t he education and growth of children left behind in the process of love missing parent, children left behind to create more love and more appropriate exchange pro has become an issue o f great concern to the community at present. Love pro remote interactive system is a new way to interact developed in recent years, it has broken the traditional voice and video interaction, using immersive video object fusion technology, so that both sides can produce interactive immersive interactive experience, great enhance the interaction effect, is t