增强现实环境下的人手自然交互.pdfVIP

No．4 第23卷第4期 计算机辅助设计与图形学学报 V01．23 2011年4月 Journalof 1 Computer—AidedDesignComputerGraphics Apr．201 增强现实环境下的人手自然交互 孙 超，张明敏”，李 扬¨，汤 兴∞，潘志庚 310058) 1’(浙江大学CADCG国家重点实验室杭州 2’(英特尔亚太研发中心上海200241) (sunchflo@cad．zju．edu．on) 摘 要：为了实现增强现实环境下的自然人手3D交互，提出一套针对不佩戴任何标记的人手的3D交互算法．该算 法经过区域检测跟踪、特征点提取和3D稀疏结构重建等步骤获取人手的3D结构；在此基础上提出基于指尖、指向 和手掌平面的人手3D交互模式；将从真实世界提取的3D交互信息对齐到虚拟世界，融合渲染并触发交互，实现自 然人手3D交互．实验结果表明，该算法具有较高的沉浸感、精确度和易用性． 关键词：增强现实；三维交互；特征提取；多视几何 中图法分类号：TP391 HandBasedNaturalInteractionin AugmentedReality Sun Pan Chao”，ZhangMingmin”，LiYang¨，TangXing孙，andZhigen91’ 1’(State of 310058) KeyLaboratoryCADCG，ZhejiangUniversity．Hangzhou 2’(Intel 200241) ResearchDevelopmentLtd．，Shanghai Asia—Pacific ordertoachievehandbasednaturalbehaviorinteractionin Abstract：In augmentedreality，thispaper a of ofhand a3Dinteraction formarker-freehand．This usesseries proposes algorithm algorithm steps detection。handfeatureextractionandhand3Dstructurereconstructionto 3Dstructureofabare get hand．Basedonthis，weextract3basic3Dinteractionmodesof and inreal hand：point，lineplane worldand theminthevirtualworldtoachievehandbasednaturalbehavior3Dinteractioninthe align environmentof also resultsto the reality．Thispaperpresentsexperimentalverifysuperior augmented