智能设备数字孪生应用 第4章 数字孪生的关键技术.ppt

4.3关键技术：虚拟现实技术（2）全身动作捕捉系统全身VR动作捕捉系统是一种可以对人体进行全身动作捕捉的技术。它可以通过传感器、摄像头、标记等设备对人体进行捕捉，然后将捕捉到的数据传输到计算机中进行处理，将人体的动作实时呈现在虚拟现实场景中。它的主要功能有动作捕捉、表情捕捉、动作数据精修等。它的应用范围主要有影视、动画、游戏、广告、教育、VR/AR、人体工程学研究，模拟训练，仿真和生物医学等领域。全身VR动作捕捉4.3关键技术：虚拟现实技术摄像头技术通过拍摄人体的动作来进行捕捉，主要应用于人体的大部位。标记技术将特定标记贴在人体上，再通过摄像头来进行捕捉的技术，可以提高人体动作捕捉的精度和稳定性。传感器技术通过测量人体的加速度、角速度、磁场等参数来捕捉人体的动作，主要应用于手部、脚部等较小的部位。全身VR动作捕捉系统的技术原理4.3关键技术：虚拟现实技术追踪技术眼球追踪技术眼球追踪主要是研究眼球运动信息的获取、建模和模拟。当人的眼睛看向不同方向时，眼部会有细微的变化，这些变化会产生可以提取的特征，计算机可以通过图像捕捉或扫描提取这些特征，从而实时追踪眼睛的变化，预测用户的状态和需求，并进行响应，达到用眼睛控制设备的目的。头部跟踪俗称头瞄，是指利用传感器追踪使用者头部的运动，然后根据头部的姿势移动所显示的内容，广泛用于三维显示中的虚拟视角控制。4.3关键技术：虚拟现实技术（3）基于计算机视觉的动作感测设备基于计算机视觉的动作感测设备是运用外摄像头、红外线采集图像，建立手势模型，实现对用户动作感测和捕捉的一种设备。手势识别的硬件基础是深度摄像头，深度摄像头主要采用结果光、双目成像和飞行时间等三种技术方案。课后作业查找每一个输入设备，了解其特征、适用场景，采用何种技术。知识回顾以下这几种输入设备分别应用于哪些场景？需要哪些技术来实现？VR控制器数据手套VR头盔4.3关键技术：虚拟现实技术移动端VR头盔VR一体机游戏主机VR头盔PC端VR头盔头戴式显示器以外接个人计算机为主的VR显示体验度好、算法复杂，主要涉及光学、仿真、传感、人机交互等多种技术使用场景在室内，便携型较差以游戏机为主的VR显示头盔具有独立的VR屏幕只兼容特定的游戏机以智能手机为运行系统的显示设备手机承担了计算单元、内容输出和显示单元的功能未真正实现交互和沉浸感。将数据运算主体和显示主体集成不需要外设的VR独立平台该设备对技术和厂商设计要求比较高4.3关键技术：虚拟现实技术头戴式显示器虚拟现实系统的输出设备虚拟投影设备立体声音箱4.3关键技术：虚拟现实技术2.虚拟投影设备使用光场成像技术来展示沉浸效果的设备，是视觉表现的主要方式。视觉表现技术主要包括平面显示技术和光场景成像技术。光场景成像技术还分为全息技术和视网膜投影技术。全息技术是利用干涉和衍射原理再现三维图像技术。视网膜投影技术更加先进，不需要任何显示屏，直接在视网膜上扫描使用户感觉到一副逼真的外部图像。4.3关键技术：虚拟现实技术3.立体声音箱虚拟现实平台的声音部分十分重要，因为声音可以增强用户体验。虚拟现实平台使用立体声音箱（或插耳式耳机）来隔离外界噪音，提供更准确的声音和更好的听体验。4.3关键技术：虚拟现实技术虚拟现实的软件UI设计软件VR操作系统中间件4.3.5虚拟现实系统的软件与技术开发平台对人机交互、操作逻辑、界面美观等方面进行整体优化的设计的一类软件。常用的虚拟现实的UI设计软件主要有Sketch、Unity3D、Photoshop、AE等。VR操作系统管理VR硬件资源、软件程序和VR应用程序的软件，VR操作系统包括原生系统和开源系统。代表厂商主要有雷蛇、谷歌等。中间件在软件开发过程一种为作为内核和用户体验之间的软件，另一种是添加服务、特性和功能，改进和简化游戏开发的软件。4.3关键技术：虚拟现实技术虚拟现实整合软件虚拟现实软件开发工具包4.3关键技术：虚拟现实技术（1）虚拟现实整合软件虚拟现实整合软件主要包括Virtools、Quest3D、WebMax等。Virtools是一套整合软件，可以将现有常用的档案格式整合在一起，如3D的模型、2D图形或是音效等。具备丰富的互动行为模块的实时3D环境虚拟实境编辑软件。可以让没有程序基础的人员利用内置的行为模块快速制作出许多3D产品，如网际网络、计算机游戏、多媒体等。4.3