面向AR VR设备的混合现实交互手势识别微波雷达信号处理与加速设计.docxVIP

PAGE2

面向AR/VR设备的混合现实交互手势识别微波雷达信号处理与加速设计

摘要

本课题面向混合现实设备对自然、非接触式人机交互的迫切需求，针对传统视觉手势识别方案在光照敏感、隐私泄露与计算延迟高等方面的不足，设计并实现了一套基于毫米波雷达的手势识别信号处理与硬件加速系统。课题的核心目标是提取手势微动特征，构建轻量化识别网络，并设计专用推理加速器，实现低延迟、高可靠的非接触交互。

论文遵循“需求分析→总体设计→详细设计→实现→测试”的工程递进思路展开。首先分析了AR/VR设备对交互手势识别的性能指标与功能边界。随后，在总体设计中规划了从雷达信号采集、预处理、特征提取到神经网络推理的硬件-软件协同流水线架构。在详细设计层面，重点阐述了基于距离-多普勒图的微动特征提取算法、轻量化卷积神经网络的结构设计，以及基于FPGA的并行推理加速器微架构。最后，通过搭建原型验证平台，对系统进行了功能验证与性能测试。

本设计的核心创新在于：提出了一种面向雷达时序数据的多维微动特征融合方法，在保留手势时空特性的同时压缩了数据维度；设计了一种融合深度可分离卷积与通道注意力的超轻量网络，参数量低于0.5M；实现了一种基于脉动阵列与数据流优化的可配置硬件加速器，单次推理延迟低于1毫秒，为混合现实设备的无感交互提供了坚实的技术基础。

第一章绪论

1.1研究背景

混合现实（MR）技术正逐步从概念走向