听障人士手语同传的远程视频通话智能分屏界面与交互优化.docxVIP

PAGE2

听障人士手语同传的远程视频通话智能分屏界面与交互优化

摘要

听障人士在社会交往中高度依赖手语，但主流视频会议工具普遍忽视手语交流的视觉特征，导致手势辨识困难、多画面布局混乱、翻译信息缺失等问题日益突出。本课题面向听障者、健听者与手语译员的多方视频通话场景，设计并实现一套智能分屏界面与交互优化方案。

研究遵循“需求分析—总体设计—详细设计—原型实现—可用性测试”的工程递进路线。首先通过用户调研与行为分析，提炼出手语清晰度、布局自适应、翻译同步显示等核心需求；进而提出基于手势活跃度检测的动态分屏布局算法，并融合局部对比度增强与边缘锐化技术提升手势可辨识性。在总体架构上，采用客户端?服务器协同模式，利用WebRTC传输实时音视频流，前端基于React实现高可定制化的界面组件。

论文详细阐述了智能分屏模块与手势增强模块的算法流程、接口定义与交互逻辑，并通过原型开发与受控用户测试验证了方案的有效性。测试结果表明，所提设计可将手语关键动作的辨识错误率降低约18%，用户任务完成时间缩短约23%，且获得了听障群体的较高满意度。本设计为无障碍视频通信领域提供了新的界面范式，其核心创新在于将手语视觉行为感知与动态界面布局深度融合，实现了从“被动适配”到“主动优化”的转变。

第一章绪论

1.1研究背景

据统计，中国听力言语残疾人数超过2780万，手语作为其天然的第一语言，承载着日常