基于视觉的人行为理解综述.docVIP

基于视觉的人行为理解综述 凌志刚赵春晖梁彦潘泉王燕 摘要：基于视觉的人体运动分析是计算机领域中备受关 注的前沿方向之一，而人行为理解由于在智能监控、人机交 互、虚拟现实和基于内容的视频检索等方面有着广泛的应用 前景更是成为了未来研究的前瞻性方向之一。行为理解问题 一般遵从如下基本过程：特征提取与运动表征；行为识别; 高层行为与场景理解。着重从这三个方面逐一回顾了近年来 人行为理解研究的发展现状和常用方法，并对当前该研究方 向上亟待解决的问题和未来趋势作了较为详细的分析。 关键词：特征选择；运动表征；行为识别；高层行为与 场景理解 Abstr act：Humanmovementa nalysisfromvideose quencesisanactiver t ervisionandhumanm isafuturedirection asithasmanypot ent i nssuchassmartsurvE terinterface,virtu asedvideoindexing, erstandingisgenera efundamentalsubproesearchareaincompu otionunderstending ofprospectivestudy alapplicationdomai illance,humancompu alrealitycontend b quencesisanactiver t ervisionandhumanm isafuturedirection asithasmanypot ent i nssuchassmartsurvE terinterface,virtu asedvideoindexing, erstandingisgenera efundamentalsubpro etc. Humanactionimd llydividedintothre cesses：featureextr actionandmotionrep tyrecognitionandhi ndscenepaperanalyz i nhumanacti onunder omthreefundamental processes? Attheend edsomedetaileddiscresentation,activi gherlevelactivitya edthestateoftheart standingindeta actionandmotionrep tyrecognitionandhi ndscenepaperanalyz i nhumanacti onunder omthreefundamental processes? Attheend edsomedetaileddisc resentation,activi gherlevelactivitya edthestateoftheart standingindeta订ft,providedandanalyz ussionsonvitalprob lemsandfuturedirec tionsinhumanaction understanding Ke y words： fea tu reex tr action； mot ionrepre sen tat ion； activity recognition ； highle velactivityandscen eunderstending 0引言 近年来，人运动视觉分析由于在智能监控［1］、高级人 机交互［2］、虚拟现实［3］和基于内容的视频检索与解说［4,5］ 等方面有着广泛的应用前景和潜在的经济价值，激发了广大 科研工作者及相关商家的浓厚兴趣，并成为了计算机领域中 备受关注的前沿方向之一。目前，在世界范围内已经开展了 大量的视觉分析研究项目。例如1997年美国国防髙级研究 项目署设立了视觉监控重大项目VSAM［6］,主要研究用于战 场及普通民用场景监控的自动视频理解技术；实时视觉监控 系统W4［7］不仅能够定位和分割出人的身体部分以及实现多 人跟踪，而且能检测人是否携带物体等简单行为；1999年欧 盟Framework5程序委员会设立重大项目ADVISOR系统［8］， 旨在开发一个公共交通的安全管理系统，它覆盖了人群和个 人的行为模式分析、人机交互等研究；2000年，DARPA又资 助了 HID计划［9］，其任务是开发多模式监控技术以实现远距 离情况下人的检测、分类和识别，从而增强国防、民用等场 所抵御恐怖袭击的能力；英国雷丁大学［10］先后开展了 R EASON、 ETISE(evalua tionofvideosceneun derstanding) ISCAP S (integra