AR—虚拟与现实无缝对接培训课件.ppt

AR—虚拟与现实无缝对接 李名月 2017-07 Overview 增强现实已经到来 增强现实行业分析 增强现实技术揭秘 增强现实开发技术 电影《007系列》（1995）中皮尔斯·布鲁斯南的X光眼镜，可扫描隐蔽装备 把电影般的体验带入现实生活 电影《钢铁侠》（2008）中托尼·斯塔克实验室中的触控显示屏 把电影般的体验带入现实生活 Your new way to create 增强现实行业分析 增强现实行业应用成熟度曲线模型 增强现实技术应用领域 增强现实行业市场规模 增强现实行业应用方案 幻窗显示方案 幻台显示方案 幻镜显示方案 增强现实行业主要产品及其发展现状 增强现实细分市场——头戴显示器企业案例 微软与Autodesk联合强化Hololens的功能 增强现实细分市场——软件企业案例分析 高通—我们经常会做一些很多人认为不可能的事 Qualcomm 是谁？Qualcomm 就是工程师、科学家和企业战略家的组合。 我们来自不同国家和地区，说着不同的语言， 我们拥有不同的文化背景和独特的视角。 然而我们都拥有一个共同的目标——不断取得移动技术的突破。 Qualcomm® Vuforia™A PTC Business 移动视觉平台 将彻底改变您与世界的互动方式 See THINGS in a whole new way 增强现实底层技术揭秘 下面是干货 增强现实技术原理图 增强现实技术架构 增强现实技术架构 首先是三维信息感知：计算机必须通过传感器感知三维环境信息，这个传感器可以是普通 RGB 摄像头，也可以是 TOF 或者结构光深度摄像头，但是选择不同的摄像头也决定了接下来算法的复杂程度 增强现实技术架构 第二步：三维场景重构，这也是最重要的一步，需要通过所获得的环境信息实时对场景进行三维重构。这里就用到了SLAM（Simultaneous Localization And Mapping，即时定位与地图构建）算法，该算法在实时构建三维场景的同时，能够准确地定位拍摄相机（或拍摄者）的位置。 增强现实技术架构 第三步，三维场景识别：当我们通过第二步获得了丰富的三维场景信息后，接下来需要让计算机理解三维场景，即让计算机认知什么是地板，什么是天花板，什么是桌子，是一张什么桌子，桌子的材质是什么？目前在研究领域，3D 场景与物体的识别才属于起步阶段，领先者Andrew Davison 教授，他领导的实验室在 CVPR2013 会议上提出的 SLAM++ 算法，可以通过 RGBD 摄像头进行 SLAM 的同时进行实时物体识别，并完成物体的物理建模。 SALM++ 的三维重构和识别效果 增强现实技术架构 第四步，物理建模与仿真：在识别出三维物体之后，虚拟物件（小机器人）需要和物件发生交互（例如：碰撞），则需要对三维物体的材质进行识别。 第五步，实时 CG （Computer Graphics）图像渲染：在完成了所有呈现效果的仿真计算之后，便是将 AR 效果实时渲染出来，进而投射在显示设备上。这是个相对成熟的工程问题。 基础学科——计算机视觉（Computer Vision） 计算机视觉（Computer Vision） Computer Vision —— Recognition 增强现实移动开发技术 AR SDK（Software Development Kit） 支持平台 Android iOS Windows 注册方式 标记 图像 GPS 重力、加速度传感器 脸部跟踪 其他特征 Unity（3D）插件 支持免费版 支持AR浏览器 工具名称 支持特征 Metaio 14 D’cusion 13 Wikitude 11 AR Toolkit 10 ARLab 10 Layer 9 AR23D 9 Vuforia 9 IN2AR 9 主要AR开发工具支持特征 考察项目表 Vuforia增强现实的原理 Vuforia实现增强现实的原理与其它AR技术相似，分为两个步骤。 第一步是识别，它可以不仅可以识别一些例如杂志封面、包装盒、名片、照片、邮票等平面物体，Vuforia还强化了对3D物体的识别能力。 在完成识别之后，就会触发显示一些预设的内容。Vuforia可实现的触发内容包括二维、三维游戏、视频、音频。 Vuforia有三大特点 首先是可以提供稳定良好的视觉效果，这对于一个游戏类AR产品很重要，不可能让用户玩游戏时突然发现丢帧，或者图像没能很好地渲染在背景上。 第二就是可对二维、三维对象进行识别，识别率比较好，即便是在识别对象部分被遮挡的情况下，也能成功识别。 第三则是支持硬件范围广，从手机到平板电脑，最新版本Vuforia也已开始支持智能眼镜。 Vuforia的应用场景 第一个是交互式商品，就像上述所提到的，在商品包装上加入可识别的元