基于自然特征增强现实系统实现.docVIP

基于自然特征增强现实系统实现 　　摘要：目前，增强现实技术得到了越来越广泛的应用。增强现实系统的视觉跟踪注册有基于人工标记和基于自然特征标记注册两种方式，本文探讨了基于自然特点标记的增强现实系统的实现方法。利用OpenCV的ORB特征检测得到视频图像帧的特征点，然后将这些特征点与参考图像的ORB特征点进行汉明距离匹配，并通过RANSAC算法将错误的匹配点剔除，从何得到正确的匹配图像，然后根据匹配的点计算世界坐标系到图像坐标系的变换矩阵，最后通过OpenGL将与特征对象对应的虚拟物渲染到屏幕上。 　　关键词：增强现实；自然特征；ORB；OpenCV；OpenGL 　　中图分类号：TP18 文献标识码：A 文章编号：1009-3044（2015）29-0165-02 　　Realization of Augmented Reality System Based on Natural Features 　　LUO Lin， LI Jun-qin 　　（Guangzhou University Huaruan Software College， Guangzhou 510990， China） 　　Abstract： At present， the technology of augmented reality is more and more widely used. The visual tracking registration of augmented reality system is based on manual marking and registration of natural features， This paper discusses the implementation of augmented reality system based on natural features . The features of the video frame are detected and computed by OpenCV library’s ORB feature detection algorithm ， then match the ORB features with the reference image’s ORB features by hamming distance， and use the RANSAC algorithm to get the correct matches， then calculate the matrix transformation from world coordinate system to image coordinate system ，then render the reference image corresponding to virtual object by OpenGL. 　　Key words：augmented reality；natural features；ORB；OpenCV；OpenGL 　　1 概述 　　“增强现实技术是将真实场景同虚拟物体加以融合的一种手段，增强现实系统的特点是虚实空间的一致性结合以及实时交互，具体包括3D物体的注册技术、 显示技术、跟踪和定位技术等”[1]。 　　由于增强现实技术能在真实场景中融合虚拟物体，所以增强现实技术在交互学习、互动娱乐、交互广告等领域有广阔的应用前景。在交互学习场景中，儿童电子出版物的应用比较广泛。其一般方法是在纸质出版物中印刷简单的标记或者特定的图像，该标记或图像代表了可以融合在在真实场景中的虚拟物体。儿童通过手机或者带有摄像头对准该标记或图像，增强现实应用程序则在手机屏幕或者计算机显示器上显示融合了虚拟物体或者影视片段的真实场景，这些场景可以随着用户的操作，可以进一步该表虚拟物体呈现的外观或者相应的影视片段，能极大提高儿童学习的兴趣。 　　在增强现实应用中的“视觉跟踪注册技术主要分为基于人工标记和基于自然特征标记的注册”[2]。人工标记检测的计算复杂度低、算法成熟，但是也有会遮盖真实场景、受遮挡影响较大的问题，而基于自然特征的注册方法则避免了上述问题，得到了越来越广泛的应用。 　　本文将讨论一种在IOS平台上基于自然特征进行增强现实应用开发的方法。 　　2 关键技术 　　增强现实应用是基于计算机视觉的。许多增强现实应用都需要首先从抓取的视频帧图像中用计算机视觉的处理方法提取特征或者图像分析、比较。OpenCV是一个开源的计算机视觉开发库，它集合了常用图像处理、分析、比较算法，在增强现实等计算机视觉研究领域得到了广泛的应用，本文讨论的增强现实系统在图像特征匹配、摄像