基于Kinect的动态虚拟试衣系统构建.docVIP

基于Kinect的动态虚拟试衣系统构建 　　摘 要 随着网购衣服覆盖面的扩大，不能实时了解衣服试穿效果的问题变得越来越显著。为了改变这种情况，我们基于Kinect的人体识别功能和WPF程序强大的交互功能，构建了虚拟试衣系统，该系统采用平面贴图匹配人体图像的方式，实现试衣效果，最大的特点是人体可在系统前随意活动，试衣体验更加真实。 　　【关键词】动态虚拟试衣 Kinect WPF Visual Studio 平面贴图 　　1 引言 　　随着网络购物的普及，衣服不能试穿的弊端越来越被重视，不仅大小是否合适的问题――不过这个问题可以根据商家和消费者的互动可以很好解决；然而，衣服穿上身体的效果如何，就是另一回事了，而引入虚拟试衣是较为理想的解决方法。 　　近年来，已经有不少文献提及了使用Kinect进行虚拟系统搭建的构想，如文献[1][2]，指明了一个很有开发前景的应用方向，上述文献通过使用平面图片或是构建3D模型，将消费者和衣服图像叠加，可以部分起到试穿的效果。 　　然而，文献提及的方法略显复杂，文献[2]需要构建的3D模型，需要费去前期很多的功夫，然而，却依然只能原地站着试穿，发挥不了3D真正的优势；文献[1]的平面图片方法，满足了简便的要求，但是由于没有上传图片，我们无法得知效果如何。 　　本文介绍一种基于Kinect，前期服装库准备简单，可以真正实现动态试衣效果的虚拟试衣系统。 　　2 实现思路 　　我们仍然采用类平面贴图的方法，即，把衣服图片叠加在人体图像上，这是我们在权衡了效果和可操作性地基础上决定的。为什么平面贴图可行呢？想想我们照片给出立体感觉的原理，图片是平面的，但是我们人脑，基于经验，是会在脑海中自动生成立体感觉的；同样重要的是，平面衣服的准备十分简单，只要掌握基本的PS分割图片的技术，即可完成个性服装库的构建，推广给淘宝商户的难度会大大降低。 　　图1是我们的使用效果图。在补充资料部分，会附上我们的实验视频，这是我们本设计的一大特色：可以在虚拟试衣系统面前尽情活动，就跟衣服真的穿在身上一样。 　　3 系统设计和实现 　　虚拟试衣系统主要由3个模块构成（见图2），人体识别模块，衣服试穿模块，以及操控模块。 　　3.1 人体识别模块 　　人体识别，包括彩色影像获取，骨骼识别以及相应的坐标点，是通过Kinect设备及Kinect SDK来获取的。 　　彩色图像显示流程（图3）。 　　骨骼图像显示流程（图4）。 　　3.2 衣服试穿模块 　　衣服试穿基于WPF程序的Image控件和骨骼识别出来的关节点数据。Image控件放置衣服图片，骨骼数据的关节点确定位置（图5）。 　　Kinect能识别出来的骨骼点如图5[3]。 　　在Kinect SDK中，我们可以通过调用SkeletonFrame，获得骨骼点的坐标信息，通过坐标转换方法MapSkeletonPointToColorPoint（） ，即可获得特征关节点在彩色图像的坐标信息，如Shoulder、Hip 和 Knee 等点。 　　在WPF程序中，Image控件的位置由Top 和 Left 两个坐标确定，这个屏幕坐标系是以屏幕左上角为原点。上衣部分，我们采用3个Image控件来展现一件衣服（以T恤为例），分别是左手臂，上身中央和右手臂（见图6）。 　　左手臂就是用Shoulder_Left（见图5）关节点的坐标，经过变换得来。右手臂对应Shoulder_Right，身体中央对应Shoulder_Center。 　　之后便是确定Image控件大小。这里有必要先提及Kinect彩色图像的特点。我们用的数据帧是640 * 480，每个像素点能表示的实际距离随人体在Kinec前的位置的改变而改变。因此，如果固定设衣服的长宽是 100像素* 60 像素，在kinect前2m 刚好，此时，人往前移动，衣服会显得太大，往后移 　　动又显得太小。为克服这个问题，使试衣更加灵活，我们采用公式： 　　衣服长度 = 骨骼点距离（彩色坐标表示） 变换系数 　　比例系数根据实验测得。 　　裤子（图7）我们分成四部分，左、右腿和左右小腿，方法类似上述上半身的处理方法。（见图6）。 　　到这一步，试衣还是不完整的，所以图像都是固定竖直的，不能转动。这就需要加入 Image控件旋转方法 TransformGroup类中的 rotateTransForm（） 方法，旋转角度需要计算。 　　我们采用的旋转模型都是上关节点x1为固定点或支点，下关节点x2为运动点，这样，所以衣服Image控件都能获得需要的效果（图8）。 　　计算公式如下： 　　（x1，y1） 　　α α=180-arctan 　　（x2，y2） 　　图8：骨骼旋转