基于移动视频的人员身份及信息识别技术研究.pdfVIP

基于移动视频的人员身份及信息识别技术研究 摘 要 我国各行业正处于快速发展阶段，使得交通枢纽，工厂、仓库等重要行业场 所中存在的安全隐患愈发增加，各类事故频繁发生，所以，形成高水平的救援新 模式，是保障各类行业正常运转的关键。本文聚焦各类复杂场景下的应急救援工 作，针对救援时的事故现场移动视频远程传输系统，针对回传视频数据，对其中 的相关人员身份及信息的智慧识别等工作进行研究与实现。应急作业场景中，在 移动视频采集方面，存在场景复杂，信号传输链路难以铺设以及传输带宽有限等 问题；在针对采集数据中被困人员的身份及信息进行智慧识别方面，存在前端计 算资源有限，移动视频质量偏差等限制，本文采用WIFI 多级桥接应急多媒体传 输方法及系统结合基于移动视频的人员身份及信息识别算法，模拟了实际的视频 传输环境，并有效解决了信息采集方面存在的问题。 信息采集方面，本文形成了基于改进SSD 的人脸检测算法，符合应急救援场 景中实时检测的应用条件，并且能够有效克服传输画面中存在的视频画面不稳定 与出现多尺度检测目标的情况。研究了基于改进Arcface 的人脸检索算法，能够 将分类过程中缩小类内差距与增大类间差距的效果达到最佳，使得救援过程中， 尽可能严格了相关人员身份识别过程，将误识概率降到最低。搭建了基于特征图 叠加的年龄信息识别网络，与传统网络不同，采用浅层特征叠加作为深层输入的 形式，在增加网络深度的同时，不会过多增加网络计算量。并有效利用上下文信 息，从而提取人脸的多元化特征，在针对应急场景下拍摄的移动视频中不同质量 的人脸图像数据时，能够得到较为准确的分析结果。建立数据集进行了各网络的 训练，形成系列模型，实现了相应功能，对于身份识别，可实现0.56s 的比对认 证速度，单次比对速度在1ms 左右，认证精度可达93%，年龄属性识别作为救援 后处理工作，用作救援工作的辅助参考，准确率可达88.06%。 系统实现方面，首先，研究基于5.8GHz 的WIFI 多级接桥技术并研制相关设 备，在无线自组网技术基础上，在传输能力与适应性方面进行了改进，能够有效 适应远距离、遮挡及垂直差异存在的信号传输场景。提出采用广泛应用的公网4G 信号来构建通信系统，结合移动视频拍摄技术与设备，从而使得整体桥接与通信 系统可满足类似地铁环境的复杂环境下的移动视频传输要求，从而保障应急救援 I 现场中移动视频的拍摄与传输。模拟了真实的应急通信环境，并结合信息采集模 块中的系列算法模型，设计并搭建基于移动视频的人员身份及信息识别系统，在 北京地铁环境下，通过验证系统的各项功能指标，证明了信息采集方面的相关算 法满足在实际场景的应用需求。 关键词：人脸检测与识别，人脸属性，视频通信，应急救援 II 目 录 摘 要 I Abstract III 第一章 绪论 1 1.1 研究背景与意义1 1.2 国内外研究现状3 1.2.1 应急通信系统国内外研究现状4 1.2.2 目标检测算法国内外研究现状4 1.2.3 人脸检索算法国内外研究现状6 1.2.4 人脸属性分析国内外研究现状9 1.3 研究内容及论文结构10 第二章 身份认证及属性分析算法研究 12 2.1 引言12 2.2 基于改进Arcface 的身份认证算法研究13 2.2.1 基于改进SSD 的人脸检测基础算法研究13 2.2.2 针对人脸检索的人脸特征提取网络介绍21 2.2.3 各类人脸检索损失函数介绍与对比25 2.2.4 基于角度空间的损失函数介绍28 2.2.5 基于改进Arcface 的损失函数研究30 2.3 基于特征图叠加的人脸属性分析算法研究32 2.3.1 卷积神经网络基础架构介绍33 2.3.2 基于特征图叠加的生理特征识别网络研究40 2.4 实验设计与性能验证47 2.4.1 数据集构建47 2.4.2 实验平台48 2.4.3 网络训练49