图像特征提取、配和新视点图像生成技术研究.pdf

摘 要 摘 要 基于图像的绘制技术是近几年兴起的一种新的虚拟场景绘制策略，它已成为当前计 算机图形学界的一个研究热点。基于图像的绘制技术结合了计算机图形学、计算机视觉、 图像处理、摄影测量学等许多学科的理论和成果，用真实的图像来代替传统的几何建模， 使绘制的图像真实自然、绘制的速度不依赖于场景的复杂度。本文对该领域中新视点图 像生成和其相关技术进行了研究，主要包括特征的检测和提取、基于点特征和线特征的 宽基线(widebaseline)图像匹配、基于轮廓对应的任意新视点图像生成等。 特征检测是图像处理中的一项基本技术。根据匹配和新视点图像生成的需求。特征 检测方法需要特征定位的精度较高，能同时检测出角点、边缘等不同特征等。本文研究 了基于相位一致的特征检测技术，从频域分析图像灰度的突变位置。讨论了不同方向的 多尺度下相位一致值计算，并研究了一种用矩理论对各方向相位一致数据进行综合的方 法，可有效的区分和提取边缘和角点特征。 现有虚拟视点图像生成中初始匹配点的选取，通常是直接在图像上由用户交互方式 进行或由摄像机标定得到。交互方式容易受人为主观操作因素和图像分辨率的影响，使 对应匹配点的选取产生误差，并且使视图生成过程需人工干预，不能实现完全的自动化， 给实用化带来很大的困难；摄像机的标定需要采集图像摄像机的一些先验知识，限制了 虚拟视点图像生成方法的适用范围。本文提出宽基线图像匹配方法，分别是基于点特征 的匹配和基于线特征的匹配，将其应用到视图生成中，从而实现了虚拟视点图像的自动 生成。根据欲匹配源图像问几何变形的不同，提出了两种点特征邻域的选取和匹配原理 方法。当图像之间的尺度差异较小时，例如，在虚拟漫游中摄像机环绕景物运动时采集 的序列图像，提出～种基于仿射不变量的点特征区域提取和匹配方法，能适应大的视点 变化和光照条件的变迁。该方法以图像中颜色的局部极值点为种子点，过种子点作射线， 将沿各射线上颜色变化为最大的点连线围成区域，取该区域的椭圆拟合作为特征区域， 该特征区域具有仿射不变性。当图像之间尺度相差较悬殊时，可通过多尺度分析，在三维 尺度空间选取颜色值为不连续突变的角点作种子点，特征区域是以种子点为圆心的邻域。 对已选出的局域特征区域，逐步消除几何交换和光照变换对图像区域的影响，构造特征 向量来表征该区域内颜色分布，通过特征向量的比较来确定特征区域的匹配。实验表明 基于上述点特征区域的匹配方法具有较强的鲁棒性，可应用于宽基线图像的匹配。 基于点特征的匹配适用于纹理信息较丰富的图像，对于纹理信息较少的图像，为获 得足够多的匹配点，还需要基于线特征的匹配。相对于基于点特征的室基线图像匹配， 线特征在宽基线图像的匹配应用中研究较少，线的匹配提供的图像间信息较少，但我们 可以通过匹配直线的端点、交点，由匹配的直线段得到匹配的点。本文提出的线特征匹 配方法通过基于相位一致的边缘检测技术，检测出图像边缘，提取组成边缘直线段链， 由三条相邻直线段构成待匹配基元。检测组成基元的直线段间相对位置关系和相互连接 方式，得到基元的不变量描述，以此作为匹配准则确定基元匹配，各基元的匹配关系构 成图像间直线段的相似矩阵，通过相似矩阵的值确定全图像中直线段间的潜在匹配。并 根据所有潜在匹配中直线段间的相对位置关系，提出了一种直线段匹配的全局几何约束， 剔除错误匹配，得到了较好的直线段匹配效果。该算法可应用于宽基线图像的匹配。 大连理工大学博士学位论文 由已知图像合成新视点的图像是基于图像的绘制中的一项基本技术，它用具有高度 真实感的图像来表示虚拟场景。视图合成工作是在两幅同一目标景物，不同视点的图像 之间合成一系列连续的期间过渡图像，其中要求合成视图应该具有三维真实感，如同虚 拟摄像机所采集的图像。本文提出一种基于摄像机横向和纵向移动采集的图像合成新视 点图像的方法，该方法在合成图像中优先保证轮廓对应准确，从而使合成图像轮廓清晰。 对通过摄像机分别作横向和纵向运动采集的四幅图像，本文提出的新视点图像生成方法， 可以实现在上述四幅图像视点围成的四边形中任意新视点图像。对于一幅图像来说，图 像中形体轮廓线和区域分界线具有特殊的意义。一方面，轮廓边界是重要的视觉感知线 索。图像中像素颜色值的变化，在一个区域内往往保持比较稳定的模式，在边界处则会 发