基于色块的人体运动跟踪.pdfVIP

维普资讯 第 14卷 第4期 模式识别与人工智能 Vbl14 No 4 2 X 1年 12月 PR ＆ AI Dee 2001 基于色块的人体运动跟踪 朱 强 庄越挺 陈家实 潘云鹤 浙【江大学 计算机系 浙大一微软视觉感知联台实验室 杭州 310027 摘 要 人体运动跟踪一直是一个具有挑战性的课题．并在体育运动分析、医学分析、动画制作等领域被广泛研 究 对跟踪精度的要求和如何在运动过程中解决四肢的自遮挡现象是其中的难点 本文提出了一种基于色块 ，融合 边缘提取和区域匹配的鲁棒算法．在单相机下得到了高精度的跟踪结果井部分解决了自遮挡问题 最后给出的实 验结果将证明莪们算法的有效性 关键词 边缘检测，Hough变换 ．变形块匹配．人体运动跟踪 中国法分类号 TP391．4 1 引 言 数描述：轴长、椭圆交叉区域的长短轴．坐标系统的 原点在躯干的中心．Segen[4]利用了移动边缘的角点 作为对应的特征．在前后两帧间用距离和曲率作为 在计算机视觉领域，如何在单相机摄下的视频 度量进行正向和反向的匹配．所有的过程均基于运 流中识别、分析人体运动是一个长期而又艰巨的任 动为刚体并且平滑的假设．在 sIGGRAH98上，he— 务 ，对图像序列中的人体运动进行跟踪是其中的关 glerL5J标注首帧关节点后，利用指数映射并集成到偏 键技术 通常根据模型选取的不同将跟踪过程划分 微分方程中．这样跟踪问题就退化为求解简单的线 为两类 ：一种是基于相关模板的图标模型；一种是基 性系统，但他们的方法对于四肢的大范围运动无能 于图像特征的结构模型． 为力． 在 自适应关联模板方法中，首先构造一个变化 缓慢而平滑的变形模板，然后预测三维空间中的模 2 我们的工作 型变化，投影到二维空间，最后根据一组基于能量的 匹配准则来度量与实际图像的偏差，采用梯度下降 虽然现在的一些研究已经涉及到普通背景下的 算法最小化这个偏差．J．Rehg[运用该方法于人手 无标志跟踪，但是在一个相机下此类跟踪算法只能 的跟踪并取得了很好的效果 但是该模型过分依赖 得到较低精度的跟踪结果，假如存在大量 自遮挡情 前后帧的相关性，所以不适合快速、变化剧烈的运 况，那么跟踪的性能就会迅速退化．这使得在某些需 动． 要高精度数据领域中 体育运动分析，医学分析 的 基于特征的跟踪首先进行特征提取，然后在各 应用受到限制． 帧之间进行对应．所 以选择不受噪声、亮度 、对 比度 为此我们设计了一条附有彩色块的紧身衣，在 和尺寸影响的特征尤为重要．当加上模型知识后，只 不增加相机数量的同时希望能在跟踪时利用运动不 要图像与模型之间建立了匹配，那么特征对应也就 受限 相对有缆传感器而言 的色块标志来使得跟踪 自动完成了 一．HoggL3J的系统仅针对 自由度为一的 更为鲁棒，结果更为准确．我们提出了一种融合多种 人体行走模型 他们提取了边特征与角特征，并与一 技术的基于色块紧身衣的鲁棒算法 图 1 ，该算法 个三维圆柱人体模型进行匹配．每个圆柱用三个参 能准确得到色块的中心，并且能让计算机 自动验证 *收冒稿塞自日鉴期科学基金、教育部优秀年轻教师基金以及高等学校骨干教师资助计划资助项目 ：2001—02—15 维普资讯 4期 朱 强 等 ：基于色块的人体运动跟踪 487 跟踪结果 ，采取不同技术弥补单种算法带来的不稳 N 1帧提取的特征信息试图在第 N帧找出对应特 定性． 征并加以匹配的方法更好地利用了运动连续性带来 一 般来 兑，采用一个固定模型试 图在每帧中得 的帧间相关，使得跟踪更为鲁棒．我们的方法融合了 到匹配的方法往往使得各帧间完全独立，误差不会 以上两种思路 ，适合于长序列、任意运动的人体跟 在长图像序列中传递．但忽略长序列中人体运动本 踪 并且算法结合了色块的边界信息和区域信息，从 身具有的相关性必然导致跟踪性能的下降；利用前 不同特征层次保证跟踪的鲁棒性． 图 1 系统整体框架 计算机视觉研究者希望挖掘出彩色图像包含的一些 3 人体模型和颜色空间 在强度 图像中不存在的信息l7Ohta等人-8J提出以 动态K—L变换法找不同彩色的区域，并由此得到了 31 人体模型 一 组正交特征 I1，I2，I3并被许多同行广泛采用．我 我们将三维人体看成由关节点连接的刚体的集 们在算法中选取了三个固定的正交特征 式 1，2， 合 ．如上肢是由肘关节连接的上下臂两个刚体， 3 用于边缘检测和直方图统计，实验结果证实了该 上臂与躯干是由肩关节连接的．该人体模型由一条 颜色空间相对于相对于其它空间的优越性 附有 14个色块的紧身衣实现 效果图2 我们在灰 ，1 R+G+B ／3， ／2 尺一