混合现实中的虚实融合与人机智能交融-中国科学信息科学.PDFVIP

中国科学: 信息科学 2016 年 第46 卷 第12 期: 1737–1747 虚拟现实纵览专刊 评述 混合现实中的虚实融合与人机智能交融 陈宝权 秦学英 山东大学计算机科学与技术学院 济南 通信作者 收稿日期 接受日期 网络出版日期 国家重点基础研究发展计划 计划 批准号 和国家自然科学基金 批准号 资助项目 摘要 混合现实技术与虚拟现实技术的进展, 受到全球各界的广泛关注, 并迅速引发了在教育、医 疗、游戏等各个领域对未来的展望. 混合现实旨在将虚拟世界与现实世界融为一体, 由于其视觉景 象是视点依赖的, 因此穿戴式头盔显示器提供了可沉浸式观察混合现实场景的基础工具, 并由计算 机提供与用户观察适配的虚实融合景象. 然而, 虚实融合景象的生成, 本质上是相异时空场景的相互 嵌入, 依赖于空间几何与光照环境的共享与相互作用, 即几何一致性与光照一致性; 在社会学意义上 是行为规范的融合, 需要符合人类社会学与心理学的规律, 即行为一致性. 混合现实提供了用户与虚 拟世界交互的自然界面, 通过对人类动作和行为的理解, 在现实世界的时空中搭建用户与虚拟世界 的桥梁, 在客观上具备对虚拟世界与现实世界联结的直观性. 在此虚实混合的世界中, 人类智能可以 通过对虚实混合场景的观察来理解世界, 通过自然交互按需驱动机器对虚拟世界施加影响, 并临场 获得计算机对场景或者数据的反馈, 从而实现人类与计算机的沉浸式深度交互, 进而实现机器智能 与人类智能的深度融合. 从非穿戴式到穿戴式设备实现了混合现实的沉浸感, 从静态场景到有人类 活动的场景实现了混合现实的社会化属性, 而虚拟世界从具体场景扩展到大数据时代的数据可视化 分析语义, 则使混合现实成为人类智能与机器智能交互融合的平台. 关键词 混合现实 虚实融合 社会化融合 智能融合 引言 虚拟现实试图将人类与计算机营造的世界直接联结 使得人类可以在虚拟世界中遨游 获得与现 实世界相同的知觉感受 而混合现实 技术 则试图将人与虚拟世界及现实世界三者 同时联结起来 使得虚拟世界与现实世界发生直接联系 从而在更大程度上影响世界 由于混合现实 也建立在人类自然知觉感知的基础之上 因此本质上为所见即所得的人机交互界面 该界面将人类 从复杂深奥的计算机用户界面中解放出来 越过繁琐的菜单和参数选择 回到人类的原始感官通道 使 人可以直观地理解世界 因此 混合现实建立了用户与现实世界中的虚拟世界之间的直接通道 计算 机营造的虚拟世界与现实世界在这里自然交汇 引用格式 陈宝权 秦学英 混合现实中的虚实融合与人机智能交融 中国科学 信息科学 ⃝ 《中国科学》杂志社 陈宝权等: 混合现实中的虚实融合与人机智能交融 近两年 世界顶级公司发布的产品引发了对虚拟现实技术和混合现实技术的广泛期待 并在产业 界引发了一轮巨大的创业浪潮 、 的虚拟现实头盔、微软的 增强现实头 盔及其各种炫酷的演示系统的发布 引发了无数对于未来技术发展的憧憬 新一代头盔显示器由于较 好地解决了定标的精度和稳定性 使用户不再感到明显的眩晕 从而奠定了广泛应用的基础 但是 这 并非意味着混合现实技术的成熟 事实上 混合现实的发展仍然处于初级阶段 头盔显示器是可穿戴 设备 可以提供混合现实所需的沉浸感 为混合现实的基础性设备 但目前还有很多限制 包括移动范 围过小、视野过窄等等 更重要的是 头盔显示器中的虚实融合内容的制作与交互 还潜伏着更多更大 的挑战 由于人类感官已经发展成为高度精密的系统 模拟人类知觉的人造系统的精度和广度远未超 越 从技术上说 尽管混合现实技术前景灿烂 其广泛的实用化尚需假以时日 有待技术的