单摄像机下基于眼动分析的行为识别.PDFVIP

物理学报 Acta Phys. Sin. Vol. 62, No. 17 (2013) 174203 单摄像机下基于眼动分析的行为识别* 1 2 1 1 1† 孟春宁 白晋军 张太宁 刘润蓓 常胜江 1) ( 南开大学现代光学研究所, 天津 300071 ) 2) ( 天津工业大学电子与信息工程学院, 天津 300387 ) ( 2012 年11 月20 日收到; 2013 年4 月30 日收到修改稿) 眼动信息是识别观看视频、浏览网页等以视觉任务为主的行为的关键信息. 针对传统的可穿戴传感器普遍具 有侵入性, 而现有基于视觉的眼动仪存在价格昂贵、校准过程复杂等问题, 本文尝试使用单一的标准网络摄像头获 取眼动信息用于行为识别, 并评估了该方法的可行性. 提出一种针对低质量视频图像的虹膜跟踪算法以获取眼动信 号, 然后分别从水平和垂直方向的眼动信号中提取出五种新的眼动特征, 并从中选择出最优特征子集, 最后采用支 持向量机分类器评价了本文方法的可行性. 针对不同应用背景设计了三组验证实验: 留一交叉验证、k 折交叉验证 及单独校准测试, 三组实验中, 对不同参与者三种行为的平均识别正确率分别为68.4%, 79.3%及84.1%, 证明了基于 视频图像的眼动分析用于行为识别是一种很有希望的传感形式, 并有望用于更为复杂的传感任务. 关键词: 物联网, 行为识别, 眼睛跟踪, 传感 PACS: 42.30.−d, 42.30.Sy, 42.30.Tz DOI: 10.7498/aps.62.174203 基于视觉的眼睛跟踪 78 和注视方向估计方法由 1 引言 于具有非侵入性的优点, 已被广泛研究并应用于心 9 理学、神经科学及人机交互等领域. Kim 等 用 物联网的快速发展要求更多更方便的传感形 图像的灰度阈值估计瞳孔中心, 用边缘检测技术提 式及自动识别技术. 基于视觉获取姿态及运动信 取瞳孔及角膜边缘实现了注视跟踪, 而不同光照条 1 息实现行为识别的技术已广泛应用于视觉监控 、 件下针对不同的个体很难选取合适的阈值提取相 智能感知、人机交互以及基于内容的视频检索等 10 应特征点. Hansen 等 提出一种轮廓似然模型避 2 3 领域 , 利用陀螺仪和加速计 、麦克风和加速 免直接检测特征, 并联合粒子滤波和最大期望算法 4 5 计 以及震动传感器 等形式实现行为识别的技 设计了一个眼睛跟踪系统, 使用网络摄像头实现了 术也已取得很大的进展. 然而现有的传感形式难以 对眼睛的跟踪. 更精确的眼睛跟踪及注视估计需要 探知阅读、浏览网页、看视频等视觉任务, 因为区 多个摄像机、主动光源或者头戴式装置等辅助设 分这些行为需要利用眼动等细微的线索. 11 备. Yoo 等 用两个摄像机4 个红外光源, 根据 眼动行为伴随着几乎所有人类活动, 眼动信息