单目视频中人体运动建模及姿态估计研究-计算机科学与技术专业论文.pdf.docxVIP

浙江大学博士学位论文 浙江大学博士学位论文 摘要 摘要 对于单目视频中人体运动的自动理解和姿态估计一直是计算机视觉研究的 热点问题。本文从五个方面对基于单目视频的人体检测及运动分析展开研究，分 析了基于视频的人体检测技术：三维人体运动捕获技术，行人检测技术，视频人 体运动特征提取的方法，人体运动跟踪技术和人体运动姿态估计技术。在此基础 上进行人体运动建模和基于单目图像的姿态估计。 首先采用基于窗口梯度势能的遮挡人体检测方法对视频中人体信息进行检 测，提出了一种基于窗口梯度势能(WindowGradientPotential Energy,WGPE)的 人体检测方法。在特征窗1：2扫描过程中，通过加权级联SVM，实现对半遮挡情况 下的人体检测，利用稀疏．稠密窗口势能集筛选缩短了检测时间。由于WGPE利 用了HoG特征计算过程中的梯度信患，因此本算法与其他的基于HoG的快速检 测算法来，并不需要增加过多的计算开销，在背景较为平滑的图像中，与传统的 HOG检测方法相比具有较少的检测时间，对于较复杂的背景，本算法与传统的 HOG检测算法相当。实验表明在人体检测的准确率和效率方面有所提高，对于处 于半遮挡情况下人体检测，准确率也有明显提高。 对图像中人体姿态估计方面，采用基于贝叶斯模型的人体运动姿态估计方 法，对静态图像中人体进行肢体进行分析。提出基于边缘轮廓特征的贝叶斯模型， 为了进一步提高肢体分析的准确率引入了基于骨架轨迹图对姿态进行分析。 对于视频图像中人体的姿态分析采用基于条件随机场模型的静态图像姿态 估计，首先对图像中人体运动姿态的SIFT特征进行提取，建立SIFT人体运动特 征库对人体运动姿态进行估计，采用基于条件随机场的肢体可变结构对人体进行 建模，并采用条件随机场模型对对人体姿态进行估计， 为进一步提高姿态估计的准确率和满足实时性的要求，先对人体运动数据进 行运动节奏特征数据的提取，提出基于EM-GM人体运动节奏特征数据的自动提 取算法；对视频图像中的人体运动采用动态构建颜色．边缘特征人体模型的方法迸 m 浙江大学博士学位论文 浙江大学博士学位论文 摘要 行建模，其中各肢体的边缘信息匹配采用快速定向导角(FastDirectionalChamfer Matching FDCM)方法，并提出了快速人体肢体检测算法。然后采用基于节奏运 动信息进行人体三维姿态估计。对检测结果融入运动节奏信息进行三维人体姿态 估计，在参数的推理过程中，首先采用GPLVM方法对人体运动数据进行降维处 理，再采用局部动态特征建模，最后进行三维人体姿态参数估计。 对于视频图像中人体姿态估计，本文提出了基于约束图的视频人体姿态估计 方法，首先建立层次组合的人体运动模型，定义了人体肢体模型。并提出了基于 相关动作簇的运动模型，为了缩减搜索空间，提出RPC节点图生成树算法，并细 化了RPC的节点合并，节点分裂和生成树平衡算法。根据RPC节点图生成树算 法，提出了视频人体姿态估计算法。和基于RPC生成树模型的推理算法。提出了 一种基于三维人体动作库投影图数据驱动的(Markov chain Monte Carlo MCMC)方 法对单目视频图像中的人体姿态进行跟踪，首先对运动捕捉设备获取的人体基本 运动库中人体外观在不同视角下的外观投影图进行聚类；采用HOG对单目视频 图像中人体进行检测，能较准确分割出人体各肢体位置；最后通过三维人体姿态 推理算法外观模型对每帧进行分析模型，再利用时间约束的分析模型对目标进行 跟踪。采用约束图驱动的MCMC和基本动作库相结合构建一个适用于视频数据 建模的。并将该模型应用于数据驱动的联机行为识别，提高人体姿态的建模能力 关键词： 姿态估计，SIFT特征，人体检测，面向梯度的直方图，条件随机场 IV 浙江大学博士学位论文Abstract 浙江大学博士学位论文 Abstract Automatically analyzing and understanding human motion and pose estimation has been an important field ofcomputer vision for many years．This thesis focuses on five aspects for video-based human motion analyzing：3D human motion capture technology,pedestrian detection，human motion feature extraction，human motion tracking and 3D pose estimation technology．Through these methods，t