基于das的实时全景视频拼接系统的设计与实现-模式识别与智能系统专业论文.docxVIP

万方数据 万方数据 DESIGN AND IMPLEMENTATION OF A REAL-TIME PANORAMIC VIDEO STITCHING SYSTEM BASED ON DAS A Master Thesis Submitted to University of Electronic Science and Technology of China Major: Pattern Recognition and Intelligent System Author: Qingbo Wang Advisor: Xiaoming Peng School : School of Automation Engineering 独创性声明 本人声明所呈交的学位论文是本人在导师指导下进行的研究工 作及取得的研究成果。据我所知，除了文中特别加以标注和致谢的地 方外，论文中不包含其他人已经发表或撰写过的研究成果，也不包含 为获得电子科技大学或其它教育机构的学位或证书而使用过的材料。 与我一同工作的同志对本研究所做的任何贡献均已在论文中作了明 确的说明并表示谢意。 作者签名： 日期： 年 月 日 论文使用授权 本学位论文作者完全了解电子科技大学有关保留、使用学位论文 的规定，有权保留并向国家有关部门或机构送交论文的复印件和磁盘， 允许论文被查阅和借阅。本人授权电子科技大学可以将学位论文的全 部或部分内容编入有关数据库进行检索，可以采用影印、缩印或扫描 等复制手段保存、汇编学位论文。 （保密的学位论文在解密后应遵守此规定） 作者签名： 导师签名： 日期： 年 月 日 摘 要 摘 要 基于 DAS(Distributed Aperture Sensors，分布式孔径传感器)的实时全景视频系 统通过多个孔径传感器采集图像并进行拼接和融合，构建高分辨率的全景视频， 具有很好的应用价值，但由于存在如下一些问题而限制了其应用： 1.图像配准是全景拼接过程中最为重要的过程之一，但稳定、可靠的图像配准 算法还有待进一步研究。2. 视频拼接处理过程具有数据量大，浮点计算多，实时 性要求高等特点，单独使用的 PC 机中的 CPU 进行串行运算，拼接融合的速度较 慢，许多现有系统不得不使用专用硬件来获得实时性能。3. DAS 之间图像采集的 同步问题，不能实现同步采集则无法在实时应用中得到准确的图像拼接结果，此 外现有的全景视频拼接系统的硬件实现在成本、性能上依然有值得改进的地方。 针对上述问题以基于 DAS 的实时全景视频拼接为主要的研究对象，在综合分 析现有方法和系统的基础上对其进行了深入的讨论和研究，主要的研究内容和工 作为： 1. 研究实用的拼接融合算法、系统硬件和软件方面具体的设计与实现。设计 了针对实际中广泛应用的基于多摄像机采集图像视频的场合的全景视频拼接系统。 2. 研究 DAS 图像采集的同步方法。设计实现了一种基于 CPLD(Complex Programmable Logic Device，复杂可编程逻辑器件)的复合同步信号发生器，该方法 具有较高的可靠性和扩展性，能够确保 DAS 之间准确地同步采集视频图像。 3. 研究基于 GPU 的全景视频创建技术。提出了一种结合 CPU 和 GPU(Graphics Process Unit，图形处理器)的全景视频拼接融合方案，该方案结合了 GPU 高速的浮 点并行计算能力和 CPU 在逻辑控制方面的优势，通过 CUDA(Compute Unified Device Architecture，计算统一设备架构) C 语言编程加速视频图像的拼接，解决拼 接过程中的数据量和计算量大的问题。 通过系统实际测试表明，本文所采用的方法和实现的系统解决了拼接的稳定 配准问题，全景视频拼接速度慢的问题以及 DAS 之间在图像采集时的同步问题。 最终实现了低成本的、高分辨率、实时的、可扩展的、易于人机交互的全景视频 拼接系统的设计目标。 关键词：DAS，GPU，实时，全景，视频拼接，系统设计，CUDA I ABSTRACT ABSTRACT The real-time panoramic video stitching system based on the DAS (Distributed Aperture Sensors) which creates high resolution video through stitching and blending image streams captured by DAS has a high value of practical application. H