三维视频会议关技术研究.pdfVIP

摘要 在过去的lO年左右的时问里，在多媒体表示和通信领域的研究取得了惊人 的进展。近年来，国外出现了沉浸式三维视频会议的概念。三维视频会议除具备 普通视频会议节省参会成本的优点外，最重要的特点是能带给观看者立体感，具 有互动性，使参会者有真实接触的感觉。可以预见，三维视频会议技术将引发视 频通信的一场革命，其应用市场非常广阔。本文对三维视频会议系统中的一些关 键技术进行了深入研究，包括视差估计、遮挡检测、中间视合成等，提出并实现 了相应的算法，取得了一些探索性的成果。 由：体视差匹配是立体视觉研究中最基本的问题之一，通过寻找图像对的列应 点，获取距离信息，作为实现三维立体再现的重要信息。本文介绍了立体视差匹 配的典型方法，并列动态规划法进行了实验研究，实现了一种改进的动态规划视 差估计算法。该方法利用视差的单调性、唯一性约束，沿立体图对中两条外极线 上的点集做全局最优匹配搜索，使对应点的匹配在相似性与相容性上达到最优。 实验结果获得了较精确的视差场，匹配效果优于常规的块匹配。 此外，木文提出了一种基于对象的预测递归视差匹配算法，该方法适用于视 频会议场景的视差计算，即背景均匀一致的头肩型场景。先分割前景对象，然后 列前景刈象进行视差匹配。采用相邻块预测方法，提高了匹配的速度和精度。通 过将iF滑因子引入匹配代价函数，并进行半象素匹配，减少了噪声的影响和视差 不连续现象。实验结果表明，本算法能得出良好的视差图。 中间视生成是立体视频处理和应用的核心技术之一。本文提出了分别适合于 小基线和大基线的中间视合成算法。结合视差的一致性、平滑性准则，设计了一 种视差可靠性检测准则，利用可靠视差信息，用反向映射的方法分别对大小基线 条件下的图像对进行中间视合成，合成图的主观质量良好。 视图变形是一一类重要的中间视合成方法，本文还提出一种结合插值和视图变 形的视合成技术——基于图像拼合的中间视合成算法。根据视频会议左右视所含 信息的不对称性，判断可靠区域，生成过渡中间视图，采用图像拼合变形的方法 进行中间视插值合成。实验表明，中间视对像轮廓附近图像清晰，合成速度有较 大提高。 关键词：视差估计，中问视合成，三维视频会议，动态规划算法，视图插值， 视图变形 V Abstract Inthe aboLItten hastaken inthe past years，grcat research deVelopmentplace areaof眦11timediaand communicationRecentI ofimmersive techn0109yy，concept 3Dvideoconferencehasbeen inthe count—esBesidesthe presentedforeign of business Video conference thedjstinct adValltagesaVmg￡he cost，3D possesses c11alacteristicofimeractiVe w“ch presentation，offers paniciPantshi曲grade ofthreedimensionandrealism．Itcouldbe that perception Che jn