图像理解之立体视觉.pptxVIP

第5章　立体视觉：双目; 立体视觉主要研究如何借助（多图象）成象技术从（多幅）图象里获取场景中物体的距离（深度）信息 5.1.1　立体成象方式 5.1.2　立体视觉模块 ;5.1.2　立体视觉模块;5.1.2　立体视觉模块;5.1.2　立体视觉模块; 获得同一场景的两幅视点不同的图象 5.2.1　双目横向模式 5.2.2　双目横向会聚模式 5.2.3　双目纵向模式;5.2.1　双目横向模式 ; 1.　视差和深度; 1.　视差和深度 3-D空间点在两个摄象机的公共视场 （视角不同，被摄物的形状，摄影环境） 测距精度 x1e = x1 + e，d1e = x1 + e + x2 + B = d + e ;2.　角度扫描成象 象素是按镜头的方位角和仰角均匀分布的 可借助镜头的方位角 来表示物象的空间距离 ; 两个单目系统绕各自中心相向旋转 ; 两个摄象机是沿光轴线依次排列 基本排除由于遮挡造成的3-D空间点仅被一个 摄象机看到的问题 公共视场的边界很容易确定 ; 直接用单点灰度搜索会受到图象中许多点会有相同灰度、图象噪声等因素影响而不实用 5.3.1　模板匹配 5.2.2　双目立体匹配 ;5.3.1　模板匹配;5.3.2　双目立体匹配;5.3.2　双目立体匹配;5.3.2　双目立体匹配;5.3.2　双目立体匹配;5.4　基于特征的双目立体匹配;5.4.1　基本方法;5.4.1　基本方法;5.4.1　基本方法;注意：仅由稀疏的匹配点并不能唯一地恢复 物体外形 示例： 过这4个点的曲面可以有无穷多个 ;顺序性约束：物体可见表面上的特征点与它们在两幅成象图象上投影的顺序正好反过来 有遮挡时，图象上投影的顺序不满足顺序性约束;建立在两条极线上确定的多个特征点之间的对应关系 将匹配各特征点对的问题描述为一个在由特征点对应结点的图（graph）上搜索最优路径的问题 ;5.5　视差图误差检测与校正 ;1.　误差检测 顺序匹配约束 ;1.　误差检测 检测匹配交叉（顺序匹配约束未满足）区域 令PR = fR(i, j)和QR = fR(k, j)为fR(x, y)中第j行中任意两象素，则其在fL(x, y)中的匹配点可分别记为PL = fL(i + d(i, j), j)和QL = fL(k + d(k, j), j)。定义C(PR, QR)为PR和QR间的交叉标号，如果顺序匹配约束满足记为C(PR, QR) = 0；否则记为C(PR, QR) = 1。 对应象素点PR的交叉数（cross number）Nc;2.　误差校正 假设{fR(i, j)| i ? [p, q]}是对应PR的交叉区域，则该区域内所有象素点的总交叉数（total cross number）Ntc为： 校正交叉区域中误匹配点（零交叉校正算法 ） (1)　找出具有最大交叉数的象素fR(l, j)： ;2.　误差校正 (2)　确定对匹配点fR(k, j)的新搜索范围 {fL(i, j)| i ? [s, t]} (3)　从该搜索范围中找到能够减小总交叉数Ntc的 新匹配点 (4)　用新匹配点来校正d(k, j)，消除对应当前最大 交叉数象素的误匹配 ;2.　误差校正 例 ;2.　误差校正 交叉区域：[fR(154, j), fR(162, j)] 总交叉数：Ntc ＝ 28 (1) 具有最大交叉数的象素：fR(160, j) (2) 新匹配点 fR(160, j)的搜索范围为： {fL(i, j)| i ? [181, 190]} ;2.　误差校正 (3) 对应fR(160, j)且能够减小Ntc的新匹配点 fL(187, j) (4) 将对应fR(160, j)的视差值d(160, j)校正为 d(160, j) = X[fL(187, j)] ? X[fR(160, j)] = 27 ;联 系 信 息;1、Genius only means hard-working all ones life. (Mendeleyer, Russian Chemist)? 天才只意味着终身不懈的努力。20.8.58.5.202011:0311:03:10Aug-2011:03 2、Our destiny offers not only the cup of despair, but the chalice of opportunity. (Richard Nixon, American President )命运给予我们的不是失望之酒，而是机会之杯。二〇二〇年八月五日2020年8月5日星期