舞台三维仿真编排体感交互研究和设计.docVIP

舞台三维仿真编排体感交互研究和设计 　　根据我国文化创意产业和舞台综合呈现技术的需求，为解决传统舞美创编方式前期效果不直观，排演效率低下，操作系统交互方式单一，舞美编排操作复杂、不生动，及方案实施受外部条件约束等问题，本文提出了在三维虚拟场景中实现以体感控制的方式快速创意设计、实时效果呈现，以及实施辅助能力的数字表演智能体感编排技术，有效提高舞美设计的直观性、可靠性、方式多样性及高效性。 　　本研究的技术难点涉及体感技术、交互式舞台场景编辑、实时三维图像渲染、体感交互接口设计、虚拟现实技术与三维建模技术集成等。 　　现代数字技术的迅猛发展，舞台表演的艺术表现力被提升到了一个新的高度。传统文艺表演中所有要素均已发生翻天覆地的变化，如表演元素、方式、手段等。文艺表演各要素间的复杂关系要求艺术表演与数字技术完美结合，奠定数字表演技术的基础。 　　伴随社会物质文明与精神文明的不断发展，观众对文艺表演的要求不断提高，使得表演规模变得庞大，表演内容变得丰富，表演难度变得复杂，相应的艺术创编、排演等工作耗时自然也就越长。传统的基于二维平面的文艺表演创编及排演方式在实践中已经逐渐不能满足表演艺术发展的需求，利用计算机仿真和虚拟现实技术辅助文艺表演的设计编排必将成为今后发展的趋势，数字表演与仿真领域也必将有广阔的应用前景。 　　研究的目的和意义 　　舞美设计是文艺表演中的重要环节，涉及布景、灯光、音效、服装等设计工作。传统舞美设计的流程较为简单，首先观察表演场地、了解舞台设备情况，根据前期初步的创意构思，关联舞台的表演内容，绘制出设计方案草图，然后设计者对舞美设计效果进行讨论，以修改或者重绘设计方案草图。即使设计者掌握精湛的绘画技巧，在二维平面空间绘制出的方案效果图终究难以表现出三维空间效果，与真实舞台所呈现出的效果之间存在一定的偏差。在舞台搭建完成后，采用全人工实地排演的方式，舞美设计方案所缔造的舞台空间效果才能够完整呈现。然后，根据实际舞美效果进行舞美设计方案的调整以获得最佳的演出效果。 　　国内外有关舞美设计及体感控制排演相关技术的研究尚属空白，这也是本研究意义所在。基于现有的研究工作，以期国内的数字表演技术在智能创意平台、实时交互设计、三维显示系统等诸多方面取得建设性的突破。舞美设计、体感交互接口设计、仿真开发等专业技术人员之间加强合作，共同提升数字表演的智能水平，进一步完善多领域交叉融合的数字表演技术体系，更好地服务于国内文化创意产业。 　　三维仿真编排体感交互关键技术研究――体感交互技术 　　伴随着高新科技的蓬勃发展，前沿科技体感交互技术应运而生，体感技术通过手势或者身体动作代替传统的遥控器来控制计算机，对软件应用的方式带来了重要的影响。在虚拟交互过程中佩戴复杂动作捕捉设备是很有局限性的。在体感交互里操作者不需要用户佩戴或手持任何东西，不用校准，也不用主机处理器做任何运算。相比传统的动捕技术，在很大程度上降低了虚拟现实中动作捕捉技术的成本。而操作者完全不需要额外地使用或佩戴复杂的捕捉设备，完全消除了人们对虚拟现实交互的紧张情绪，提升了操作的自由度，增强了整体的沉浸感，从而充分提高了体感交互的实用性和娱乐性。 　　体感交互是一种在虚拟现实环境下进行交互的新型操作方式，在操作三维仿真编排系统时可以完全利用Kinect完成体感交互，摆脱传统的鼠标键盘和复杂的动作捕捉设备，通过各种肢体动作就可以完成交互的操作。对数字舞台编排来说，Kinect降低了体感技术使用的门槛，扩大了体感交互技术应用的范围，增加了虚拟现实表现的真实感，带来了一次全新的革命。 　　Kinect是基于OpenNI接口对其组建进行开发，虚拟平台可以利用达到15个捕捉节点以识别人体关节点的位置信息，从而追踪人体的动作，并将这些动作捕捉，分析、计算以及整装。通过内部控件传输给计算机进行交互，进而计算机可以对这些关节点的位置信息进行进一步分析处理，以达到生动、自由的体感交互操作。例如：通过模拟医学手术的手势来对医学专业的学生进行培训和手术过程模拟、通过双手的抬举来达到物体的放大缩小、通过手势的变换隔空取物、通过手势的挥动来达到切换图片的功能等等。 　　深度信息的手势提取与识别研究 　　随着技术的发展，使用摄像头捕捉手势的计算机视觉技术成为了手势识别的主流方式。与数据手套等设备相比，使用计算机视觉技术进行手势采集更加自然，便于使用。使用计算机视觉技术进行手势采集后，需要对获得的图像进行手势分割，将手势从图像中分离出来。手势分割的常用方法主要有增加限制法、肤色检测法等。其中增加限制法通过佩戴有颜色的标志物或使用固定颜色的背景等对采集环境进行限制，从而通过特殊颜色进行手势分割。这种方法降低了手势的自由性，但在采集精确度上有较大优势。肤色检测法根据肤色在颜色空