基于双目摄像机和虹膜检测的视线跟踪系统-控制理论与控制工程专业论文.docxVIP

北京科技大学硕士学位论文摘 北京科技大学硕士学位论文 摘 要 多媒体人机交互技术是多媒体技术和人机交互技术的结合，其主要内容是信息表示 的多样化和如何通过多种输入输出设备与计算机进行交互。它包括基于视线跟踪、语音 识别、手势输入等各种新的交互技术。而视线跟踪作为这个领域中新兴的技术，引起了 国内外研究者的浓厚兴趣，成为近年来人机交互领域中倍受关注的前沿方向。围绕着视 线跟踪这个主题，本文主要探讨了立体视觉测距和人脸检测、跟踪等相关问题。 首先，简要论述了人机交互技术和计算机视觉理论的发展历程，并扼要介绍视线跟 踪技术的基本原理和方法，总结其研究现状和进展，同时介绍本文的研究背景和研究内 容。 其次，研究了双目cCD立体视觉测距理论。提出了摄像机的数学模型，总结了常用 的摄像机标定方法，并对双HCCD系统测距建立数学模型，分析其系统误差。在此基础 上，提出了基于BP的双目CCD标定算法，来获取测距系统的数学模型。 再次，研究了人脸特征检测与跟踪技术。首先利用人脸肤色模型，把人脸与背景区 分开来，寻找连通区域，利用人脸的几何特征，排除与肤色相近的非人脸区域，得到人 脸区域。然后对人脸区域的上半部分进行动态阈值分割，把眼睛区域与肤色区域区分开 来，得到人眼区域，二值化提取虹膜，利用Sobel算子提取虹膜边缘，Hough变换提取虹 膜圆心，而内眼角的提取则采用SUSAN算子。最后对人脸区域的下半部分，利用唇色 模型提取嘴唇区域，运用嘴唇模板进行唇线拟合，得到左右嘴角。完成人脸特征检测之 后，对人脸的跟踪做了简单的研究。 最后，研究了视线跟踪算法。借助眼球的数学模型以及双目cCD测距技术，根据虹 膜相对眼角和嘴角的移动距离，计算出视线的方向。在此基础上，设计了一个基于双目 摄像机的视线跟踪系统原型，该系统由双I|CCD测距、人脸检测、人脸跟踪和视线跟踪 四大模块组成。实验结果表明，平均的视线偏差角度为8．379。 关键词：视线跟踪，立体视觉测距，摄像机标定，人脸检测，人脸跟踪 北京科技大学硕士学位论文The 北京科技大学硕士学位论文 The Gaze tracking System based on Binocular Cameras and Iris Detection Multimedia Human-Computer interactive technology is the combination of multimedia technology and human-computer interactive technology．Its main content is the diversification ofinformationexpressionandtheinteractionbetweenvarietyofFO equipmentandcomputer．It includes various new interactive technology based on gaze tracking,speech recognition，gesture recognition and so on．Gaze tracking,as an emerging technology on this field,is aroused great interest by domestic and foreign researchers,and becomes publicly attentive front direction on the hnman-computer interaction．Around the theme of gaze tracking,it is discussed about stereo vision measurement,face detection,face tracking and other related issues． Fast,the artide briefly discussed the development of human-computer interactive technology and computer vision theory,and then maillly introduced the basic pPmciples and methods of gaze tracking technology,and summed up its research status and pIogre站．At the same time,this article introduced the research background and content． Secondly，the a