《基于HoloLens的BIM+MR施工验收软件》开发框架.doc

《基于HoloLens的BIM+MR施工验收软件》 开发框架 开发背景 混合现实( Mixed Reality，简称MR)技术指的是现实世界和虚拟世界相融合的可视化环境，通过计算机的处理，将所需要的虚拟数字信息叠加在现实环境中，实现真实世界和虚拟世界的“无缝”结合。 建筑信息模型( Building Information Modeling，BIM)技术的应用将建筑工程行业从传统2D设计转向多维设计，使建筑工程中所包含的信息更加直观地展现出来，极大的提高了设计、施工、管理人员的工作效率。而MR技术将BIM 技术中的数字信息实时的叠加在用户的现实世界中，并允许用户与BIM中的模型数据进行交互，成为BIM技术可视化的全新实现手段。 2017年5月，微软公司正式发售了MR全息眼镜Hololens。该设备支持目光、手势、语音、键盘和手柄的人机交互输入，可以实时空间建模、实时空间追踪、播放空间声音。Hololens相对于其他设备的优势在于其本身就是一台计算机，集成了操作系统，具有环境感知相机和深度摄像头，大大增强了环境感知能力。除此之外，微软为HoloLens 提供了便捷的开发环境与部署方式，我们采用HoloLens作为混合现实硬件设备，基于HoloLens开发BIM+MR施工验收软件。 混合现实频谱图 项目目标 探索一种新型施工质量验收及机电验收方式； 开发一个可在Microsoft Hololens上使用的App; 申请一到两项MR技术软件著作权； 培养3~5名熟练掌握施工领域MR技术的技术人员。 实施策划 基于HoloLens开发一款BIM+MR施工验收软件：通过将BIM模型等加载到微软Hololens可穿戴设备的软件中，通过扫描二维码进行精确定位，与现实场景进行结合，在现场直观检查构件、设备、隐蔽工程的最终效果。 通过识别技术，直接对比出实体与模型不相同的位置，以此作为质量检测的新型手段。 也可用于物业维护的时候，将隐蔽的构件直接在现实中显现，帮助维修时检查管线走向，并直接调取相关构件信息，实时更新。 MR系统构成 实现流程 实现基于BIM与MR的施工质量控制各项应用的关键在于如何将BIM与MR有效结合，其实现流程与其他MR系统有所不同，主要分为 BIM 准备、MR实现和功能应用3个步骤，如图所示。 实现流程思维导图 （1）BIM准备 质量控制人员根据管理需求，对设计BIM模型进行适当修改和调整，创建可视化模型和综合协调模型和施工BIM模型等。在设计BIM模型中添加资源信息、场地信息等施工组织设计信息，创建各专业的施工BIM模型。对BIM模型进行拆分并进一步处理成不同工作所需的MR虚拟场景，包括施工过程的质量问题、安全问题、设计变更等2D文本信息、3D模型和4D施工模拟等几种不同的形式。具体处理过程是：将Revit模型导出为FBX格式，然后将其导入3ds Max软件中进行修改材质和渲染处理，导出FBX格式的文件，导入到Unity3D中，最后编译到HoloLens中实现三维模型的查看。 （2）MR实现 利用Hololens工具包开发MR应用程序，根据实际需要，调用BIM准备阶段完成的相应模型文件，调用成功后运行程序，即可在显示设备上看到虚实融合的场景，实现增强现实的效果。以上两个过程是功能应用的基础工作，即通过BIM准备、MR虚拟场景和开发相应的MR应用程序。 （3）功能应用 利用微软Hololens可穿戴设备，在其开放式平台上开发相应的应用程序，通过对现场环境信息的分析，得出信息与模型信息比对，得出差异并回传至项目平台，通过项目平台分析后将解决方案及调整方法传至现场，给予现场人员最直接的指导。 可穿戴设备的应用 施工前，项目各参与方选择相应的MR程序，对施工中的质量控制点进行识别，制定质量控制计划，针对质量控制关键点，还需要选择相应MR程序对工人进行教育培训。 施工中，如果工人遇到施工困惑，可以根据需求，选择相应的MR程序，根据MR指导正确完成施工任务。在施工过程中新发现的施工困惑和指导较多的地方，应作为新的质量关键点，加强在施工前对这些新的质量关键点的教育培训以及施工后的重点检查。 Hololens钢筋绑扎指导 施工后，质量检测或隐蔽工程验收时现场移动端与现实结合观看钢筋、复杂节点、机电管线、装饰装修的三维效果图；将检查过程中发现的质量关键点及时更新到数据库中，为今后制定质量控制计划和教育培训和施工指导方案提供依据。 运维阶段时，可以直接看到隐藏在内部的管线走向，便于维护。 MR应用中的人为因素 （1）延迟 MR要求用户能够实时地与系统进行交互，系统延迟将直接影响交互效率和任务表现。 （2）位置感知 深度错误、方位错误、遮蔽错误等注册技术上出现的错误会影响用户对虚拟物体的位置判断，如果注册误差很大或者只能实现部分注册（固定视