基于前向运动视频之铁路线路全景图拼接计算概述.docVIP

　　基于前向运动视频之铁路线路全景图拼接计算概述 1绪论 1.1课题的研究背景和意义 在摄影中，普通摄像机的视场范围多在30~45度之间，通过这样的摄像机获取的图像效果好，没有变形。而人眼视觉系统的有效视场很大，可达155-160度。人们希望能使摄像机拍摄图片的视场范围等于或大于人眼的视场范围，从而提出了全景图的概念。图像拼接具有很长的历史，在早期，人们通过把鸟敵图像的影印粘贴到一起，来生成地形拼图；后来，人们通过鱼眼透镜和曲面镜等光学系统来获得全景图像[2]，当人们开发出可以从一系列图像序列或视频图像中创建拼图的图像拼接技术时，该技术才变得实用。自二十世纪六十年代起，随着计算机技术和电子技术的不断发展和普及，数字图像处理技术进入了高速发展的黄金时期。图像拼接技术已经成为计算机视觉、计算机图形学和数字图像处理等领域的一个重要的研宄课题，它是将一系列相互间有重叠的图像序列进行匹配对准，拼接融合等操作后，形成的一幅包含各图像信息的，具有宽视角、大场景、高分辨率的新图像。图像拼接技术可以提高图像的分辨率，压缩图像冗余信息，从而可以更加有效地表示图像信息。现今，随着数码照相机，数码摄像机的普及，数字图像已经应用到我们生活的各个领域。在日常生活中，如果我们想要获取宽视角的场景图像，由于摄像器材的机械限制，必须通过调节相机焦距、缩放镜头才可以摄取完整的场景，但是通过这种方式拍摄的照片分辨率较低。上述问题虽然可以通过使用广角镜头和扫描式相机来解决，但这些设备价格昂贵，专业性强，不能为普通家庭所使用，并且使用广角镜头拍摄的照片边缘会产生扭曲和变形。为了拍摄较高分辨率的场景图像，我们不得不调节相机镜头来提高镜头的焦距，但这样只能得到场景的局部成像照片。为了解决这一问题，人们利用图像拼接技术，将多幅图像拼接成一幅具有超宽视角的、高分辨率的、完整的新图像。图像拼接技术可以在不降低图像分辨率的条件下，获取大视角的场景照片。图像拼接技术在虚拟现实、环境监测、军事作战、监控、视频数据压縮与传输、医学图像处理、基于内容的视频检索等领域有着广泛的应用。 1.2国内外研究现状 目前多釆用图像拼接技术合成全景图像，即将普通相机拍摄的若干幅来自同一场景的，相互有重叠区域的图像拼接合成为一幅具有超宽视角的高分辨图像。图像拼接技术是当前数字图像处理与计算机视觉的研究热点，具有很强的理论意义和实用价值。图像拼接技术有悠久的研究历史。在20世纪90年代Heung_Yeung Shum提出了同心圆拼图的概念，同心圆拼图又称柱面全景图[31]，是把一系列图像投影到柱形曲面上的一种全景图拼接方法，柱面全景图拼接过程中常用到模板匹配法[32]和特征点法[33]，用这种方法拼接效果比较好，技术相对比较成熟，因此得到了广泛的应用。近年来，手持相机在固定位置多角度拍摄图像的拼接成为了研宄的热点。根据摄像学原理，图像之间的变换关系可以由一个8参数投影变换矩阵[34]表示，将投影变换矩阵的参数由8个减为4个，图像配准过程釆用Levenberg-Marquard迭代法计算图像之间的变换关系，这种方法收敛速度比较快，效果比较好，可以处理常见的变换，如平移变换、旋转变换、仿射变换、投影变换等。由于在图像拼接的过程中常常会出现累计误差的现象，Tarris于1999年[36]提出了一种捆绑调整技术，从而解决了这一问题。M.Broage软件所采用。图像拼接的商业化产品还有Ulead Coo1360[38]，Hugin[39]，PTgui，PanoramaFactory[4i]等等，这些软件大部分是半自动的，需要用户输入排列好的图像顺序，或手动选取特征点进行匹配。 2全景图拼接旳相关技术介绍 2. 1成像的几何基础 图像就是空间物体在像相平面上的投影。图像上每一个点的灰度值由空间物体相应点的反射光强度所决定，空间物体表面上的点在图像中的位置与其空间位置有关。而这些位置的对应关系是由摄像机系统的成像模型[59]所决定的。在计算机视觉领域，通常将三维空间中的物体与其在像平面的投影之间的关系叫做成像模型。常用的成像投影方式有透视投影和平行投在一束平行光线照射下形成的投影，叫做平行投影。在平行投影中，物体距投影面的距离不会影响物体的投影大小，这与人类的视觉成像系统不符，不经常采用。而透视投影则釆用中心投影法，中心投影即为把光由一点向外散射形成的投影，这与人观察景物的情况比较类似。投影中心又称为视点，相当于观察者的眼睛。投影平面位于视点与空间物体之间，将空间物体上的点与视点相连会得一条射线，这条射线与投影平面的交点就是空间物体上相应点的透视投影变换结果。一般情况下，成像的过程可以由小孔成像模型来表示。下面介绍一下齐次坐标的概念，常用的坐标系以及小孔成像模型。 2. 2摄像机运动与图像坐标变换 在摄像机釆集图像的过