VR技术导论与内容开发技术.PDF

VR技术导论与内容开发技术 3Glasses 罗毅 2016年6月 又拍云Open Talk 内容概述 • VR时代的图形渲染挑战 • MEMS技术与VR • SLAM技术与VR • 传统3D内容如何使用3Glasses SDK完成到VR内容的华丽转身 又拍云Open Talk 传统3D图形渲染管线 模型转换 光照 采用本地光照或者方向光照模型 视图转换 所有的几何体都由一系列的流程处理 每个流程阶段结果都会传递到下一个阶段继 裁剪 续处理 投影 光栅化 片元处理 又拍云Open Talk 双 目立体视觉原理 • 传统的显示器成像只有一个画面 • 立体视觉根据左右人眼分别渲染出两个画面 又拍云Open Talk VR立体渲染的一般做法 • 根据双 目视觉原理，模拟人的双眼，画出两个view • 得到这两个view，根据光学镜片畸变参数，产生反畸变的图形 又拍云Open Talk VR立体渲染的一般做法 • 光学镜片引入的色散也需要进行图像纠正 • 最终畸变后的图像会通过镜片还原出原来的画面呈现给用户 又拍云Open Talk VR高级渲染优化技术 • 最简单也是最坏的解决方案，两个摄像机两次提交draw call • 优化思路是使用几何体实例化 (Geometry Instancing)，用于大 量重复物件渲染，利用缓存一致性提升vectex buffer、texture buffer的读取效率 • 稍微变动一下vertex shaders • 传入两只眼睛的世界坐标到视图坐标的裁剪矩阵作为参数 • 在D3D11中，使用Instanced版本的API： DrawIndexedInstanced() 或者 DrawInstanced() 又拍云Open Talk VR高级渲染技术简介 • SLI • Async time warp • Multi-Res shading 又拍云Open Talk SLI 又拍云Open Talk Async time warp