基于大数据分析的救火现场直播画面叠加技术.docxVIP

基于大数据分析的救火现场直播画面叠加技术 摘要：本文主要研究借助大数据分析工具（主要为AI工具），结合救火现场的直播视频和态势数据，将与救火现场有关的相关的数据，包含与救火现场密切相关的信息如专家的意见、起火点附近的资源、建筑物的图纸等等信息以视频、语音、文字、BIM图纸、GIS图纸等方式，实时叠加到直播画面上，形成视频化指令，灭火战斗力主体可以具备所谓“上帝视角”，以视频化信息为主要交流方式，直观易于理解，非专业人员（第一第二战斗力主体）能快速凝聚，熟练开展自救救人的作用；专业人员（第三战斗力主体）决策科学，战术合理，从而达到迅速生成战斗力的目标。 0 引言实验心理学家赤瑞特拉做过著名的心理实验，是关于人类获取信息的来源，即人类获取信息主要通过哪些途径。他通过大量的实验证实：人类获取的信息83%来自视觉，11%来自听觉，这两个加起来就有94%。还有3.5%来自嗅觉，1.5%来自触觉，1%来自味觉。如本文探讨的消防领域，对于基于音视频直播的视频化指令的需求就符合这一基本事实。尤其是引进AI和AR技术，引进数据结构化技术，为灭火战斗力生成提供可靠的技术保证。1 交互技术在灭火战斗力生成中运用的必然性中国是一个具有发动群众的体制优势的国家，同时灭火行动是个有鲜明纪律性的组织活动，是以秒作为计算单位来衡量人的生命和财产损失的，“视频化指令”以其对于授受双方直观准确易于理解的特性，对灭火战斗力的生成非常重要。1.1 复杂环境下灭火战斗力生成需要新的技术根据相关资料分析，消防队员牺牲的主要原因有两个：一是指挥和战术失误；二是意外。由于社会经济的高速增长，城市建设的种类和数量在不断增加，人口居住越来越密集，各种燃烧物的种类与性质日趋复杂，建筑结构、道路布局、水源分布等要素中的不定因素大大增多，出现指挥及战术失误和意外的概率大大增加。从收到火灾报警到顺利灭火短短的时间，确立正确的指挥和战术，建立防止意外发生的预防机制，是一个非常复杂的工作。需要协助识别楼层、房间，指明易燃易爆物品，规划获取消防设施和资源的路线，指明最佳逃生路线，指导救火办法和注意事项等等，这些需要大量火灾现场的视频资料、与之相关的救火预案、救火资源分布图和建筑物或场所GISBIM图。在以秒为计算单位的灭火现场，这些大量的信息需要一种全新的技术来支撑。1.2 灭火主体结构的分析灭火的特点是灭早、灭小，而最早发现火情的是火灾现场的人员，因此，灭火是一个全员的工作，分析灭火的主体构成，对于我们构建新的战斗力生成体系非常重要。第一战斗力是第一发现火灾的员工，其职责是就近取材灭火，打电话报警，引导疏散；第二战斗力是专兼职消防队员，是单位内部消防组织，职责是灭火、安全防护、疏散引导等职责；第三战斗力是公安消防队员，是灭火的最专业的主体。这三个战斗力的有效组合，需要一种新的方式。1.3 基于直播的交互技术赋能战斗力生成的主体在一个较为完善的灭火战斗力形成体系里，由于互联网和移动终端技术的日益完善，会生成大量的信息，这些信息包含语音、图片、直播视频。这些信息产生于灭火的各个环节，很重要，也很庞大。因此，我们非常明确的得出如下结论：(1）这些信息是海量的，表现形式是多样的：语音、文字、视频、照片、数据等等，获取这些信息的技术手段也是多样的，有电话、手机拍摄的视频、监控摄像头拍摄的视频、步话机、指挥中心数据库里存储的信息（GIS/BIM、消防预案、与灭火地点相关的资源）、消防队员的智能头盔（头戴计算机、自组网）等等。(2）这些信息需要经过处理才能成为有用的，因此，需要AI技术，并且调集更多的有用信息，如BIM里的房间布置图，日常检查时备案的易燃易爆物质，已经做好的应急灭火预案。在以秒计算生命的灭火现场，必须要有智能算法，自动调取适合的资料，快速形成有利于灭火的信息。(3）生成视频化信息需要构建一个技术平台，使与相关人员提供的直播视频进行叠加，直观地对第一、第二、第三战斗力主体进行指导。这个技术涉及的领域非常广，增强现实(Augmented Reality)技术、直播RTSP(Real Time Streaming Protocol）技术，R头戴计算机、态势感知、AI人工智能、自组网、5G网等等，都包含在这个体系里。2 系统体系架构描述基于直播的视频化指令体系是灭火战斗力生成的核心，它包含四套机制及其技术子系统组成。2.1 触发机制：特点是反复触发，提供多角度灭火现场视频化信息第一个触发点：119视频报警技术。视频报火警对于我们来说是一个非常新的概念，以目前中国的直播技术完全可以实现。当前的公有云、私有云、政府云都可以提供这项服务。119视频报警就是在现在119电话报警的基础上，制作一个与消防云接口连接的手机APP