运动图象序列的人体三维运动骨架重建.PDF

1运动图象序列的人体三维运动骨架重建 庄越挺 刘小明 潘云鹤 杨骏 （浙江大学人工智能研究所 杭州 310027 ） 摘要 在计算机视觉领域，人体运动分析的研究具有相当广泛的应用前景。由于人体运动的复杂性，已有 的研究方法都对研究对象—人体，加上了许多限制条件。本文中提出了一种新的方法来获得各类人体运动 的信息。本文主要论述了该方法中对人体三维运动骨架的重建部分，其基本思想是在摄相机定标的基础上， 应用三维人体模型知识和运动连续性依次建立每个图象的人体运动骨架。最后给出了实验结果。 关键词 图象序列 运动骨架 摄相机定标 中图法分类号 TP391.4 Human Three Dimension Motion Skeleton Reconstruction of Motion Image Sequence ZHUANG Yue-Ting LIU Xiao-Ming PAN Yun-He YANG Jun (Institute of AI, Zhejiang University,Hangzhou 310027) Abstract In the domain of computer vision, there is a very wide application for the research of human motion analysis. For the complexity of human motion, the existing research methods lay much limitation on human. This paper proposes a new approach to obtain the information of human motion. It focuses on the human three dimension motion skeleton reconstruction. The main scheme is to establish the human motion skeleton of every image in turn using three dimension human model knowledge and motion continuity on the basis of camera calibration. The final result is presented at the end of the paper. Keywords Image sequence, Motion skeleton, Camera calibration 1.引言 人体运动分析，就是从图象序列或视频中获取人体的运动信息，并对它进行分析，识别 等工作。由于这一研究具有相当广泛的应用前景，它正越来越受到研究者的重视。如在图象 中分割出人体的各个部分，并在图象序列中跟踪关节的运动，以至恢复相应的三维人体结构， 在运动员的动作分析，医学分析，动画制作等方面非常有用。另外，自动化地识别，理解人 体运动能够广泛地应用于监视，人机交互，视频检索等领域。 传统的人体运动分析方法一般分为两种。一是在人体的各个关节部位分别加上传感器。 在人体运动过程中，传感器会不断地将各关节在空间中的位置返回给计算机，这样计算机就 可以精确获得人体在各个时刻的运动信息。二是针对图象序列进行分析。图象序列可以是单 个相机拍下的，也可以是多个相机同时从各个视角拍下的。这一般分三步顺序完成。首先从 图象帧中提取低层特征，如各关节的位置，并对之进行识别；然后是在各个帧的特征间建立 对应关系；最后是从特征对应中恢复三维人体结构与运动信息。在这方面，O’Rouke 与 1 本文得到国家自然科学基金资助. 庄越挺, 男, 1965 年 6 月生,博士,副教授, 主要研究方向为多媒体数据库, 智能 CAD. 刘小明, 男, 1975 年 3 月生,硕士研究生,主要研究方向为多媒体技术,视频检索. 潘云鹤, 男, 1946 年 11 月生,教授,博士导师,院士,主要研究方向为计算机美术,形象思维,智能 CAD 系统,GIS,计算机动画,多媒 体技术等. 杨骏,