一种低成本基于眼动跟踪人机交互系统的研发.pdf

一 种低成本基于眼动跟踪人机交互系统的研发 姚运萍，吴庆娟，高东波 (兰州理工大学 机 电工程 学院，甘肃 兰州 730050) 摘 要：针对现存眼动跟踪系统价格 昂贵的 问题 ，研发 了一种低成本且对用户无干扰的眼动跟踪系 统。该 系统使用一个置于用户正前方的 CCD摄像机来捕捉人眼图像 ，然后使 用图像处理软件提取人眼 特征 ，根据特征间的相对位置计算出注视 点在屏幕上的坐标。该系统能实时获取用户的注视 点坐标，从 而进 行人机 交互 。 关键词 ：人机交互 ；眼动跟踪 ；低成本 ；图像处理 中图分类号：TP317．4 文献标志码 ：A 随着计算机技术、网络技术及多媒体技术的飞 1．2 瞳孔检测 速发展 ，原有的人机交互模式 (如键盘和 鼠标 )，已经 检测瞳孔中心是图像处理的难点之一 。在普通 不能适应这些新技术 的需要。近年来 ，通过 多种模 光照条件下拍摄 的人眼图像 ，瞳孔与它周围的虹膜 式与计算机交互的研究越来越多 ，从简单的语音交 亮度相近，较难区分。而在红外光照射下 ，由于瞳孔 互 已经发展到同时利用语音、手势、人的表情 、眼动 与虹膜对红外线有不同的吸收率和反射率，瞳孔部 跟踪及触觉等多种方式与计算机交互 。在输入技术 分会表现得偏暗，而虹膜部分则会偏亮 ，两者之间的 方面 ，基于视觉的人机交互技术虽不成熟 ，但 由于其 差距 明显，如图 2、图 3所示 ，从而更容 易检测 出 直接性 、自然性和双向性受到人们的普遍重视 ，成为 瞳孔 。 研究的热点 。 1 系统概述 1．1 硬件系统 图 2 普通光源条件下 图 3 红外光照射条件下 本系统采用 CCD摄像机捕捉人眼图像 。在镜 获得 的人眼 图像 获得的人眼图像 头前方安装红外滤光片，它只允许红外光通过 ，从而 本文利用椭圆拟合算法来检测瞳孔。首先对获 获取用户眼睛的红外 图像。因为视网膜对红外光是 取的图像进行预处理 ，统计灰度信息确定阈值进行 不敏感的，为 了不干扰人眼观察 目标，采用 900nm 二值化，再对瞳孑L区域进行边缘检测 ，利用提取出的 的红外光照射人眼 ，而试验所采用的 CCD摄像机对 边界 ，进行椭 圆拟合 ，进而得到瞳孑L的形状信息，如 900nm的红外光具有较好的响应。与可见光相 比， 图4所示 。 使用红外光得到的瞳孔图像更为清晰，且更容易区 分瞳孔和虹膜 。 图l为系统的原理框图。首先使用红外光照射 在人脸上，CCD摄像头获得眼睛特征信息的序列图 1 像，再将所得 图像进行二值化处理 ，然后进行特征提 取，获取瞳孔 中心和角膜反光点的坐标，从而可 以得 图 4 二值化处理后 固 5 检测到 的瞳孔 到瞳孔 中心——反光点 向量 ，为系统标 定提供 了 的人眼图像 及 瞳孔 中心 条件 。 1．3 提取角膜反光点 与检测瞳孔相 比，反光点检测要容易一些 。从 图5可 以看 出，相对于周 围的背景