基于 kinect 的深度增强与绘制技 术的研究-通信与信息系统专业论文.docxVIP

上海 上海师范大学硕士学位论文 摘要 A Abstract Shanghai Normal University Masterof Philosophy I I PAGE PAGE IV 摘要 随着视频技术的迅速发展和应用，用 2D 视频描述的世界已不能满足观众日 益增长的视觉需求。而 3D 视频描述的世界与人的视觉更加匹配，使人们在观看 时能获得丰富的立体感和沉浸感。相比于当前流行的高清视频，三维/多视点视 频对存储和传输要求更高，并随着视点个数的增加而呈线性增长的趋势。而目前 的存储介质和网络状况对于单路 2D 高清视频应用尚略显不足，当然更是无法满 足自由视点立体视频对存储空间和网络带宽的要求。所以多视点视频走向应用首 先要解决的问题就是数据量问题，而解决数据量问题的关键是立体视频 3D 场景 信息的表示问题，即如何更加有效地表示 3D 场景来减少数据的冗余。本研究在 多视点视频的理论基础上，提出了利用 Kinect 来完成深度的实时获取并进行多 视点绘制。主要工作和成果如下： .提出一种新颖的背景模型更新方法，利用 kinect 采集深度图像的过程中， 采用初始帧来不断更新高斯背景的模型，以达到最好的背景模型匹配。 .提出了基于高斯混合模型的 kinect 图像增强算法，采用高斯混合模型 （GMM）来分离深度图像的前景和背景，针对空洞出现的区域做不同的处理。背 景空洞采用对应的背景值填充，前景空洞采用纹理图+距离函数+背景图的权值函 数来确定空洞处的深度值，获取到可靠的深度图像。 3.提出了基于几何模型的虚拟视点绘制方法，针对深度图像绘制（DIBR）后 产生的空洞问题，先用高斯混合模型来分离绘制后新视点图像的前背景，根据 DIBR 后空洞存在的区域分为前景空洞和背景空洞，背景空洞我们利用背景的信 息来填充，前景空洞采用改进的 inpainting 图像修复技术来处理，得到了较好 的新视点图像。 关键词：多视点图像；深度图像； 深度图像绘制； 空洞填充 Abstract With the rapid development of digital video and the widespread application,describe the real world in 2d cannot satisfy peoples growing demand vision. The diversity demand people to video in content and quality is higher and higher, the 3d video visual more match with people, which can make people get rich stereo feeling and immersive. Multi-view stereo video can be provided to the audience more stereo video on, so relative to the current high-definition television, free view stereo video data volume is very big, is almost linear increase increased with the increase of number of viewpoints. However, the storage medium and the network condition for single-channel 2d high definition video applications leave much to be desired, certainly cannot meet the freedom viewpoints stereo video requirement for storage space and network bandwidth.if the multi-view stereo video want to popular among the people,the first thing should be to solve the problem of multi-view stereo video data. The key is to solve the data volume stereo video that representation of a 3d scene information problem, namely how to more effective representation of 3d s