面向视障与听障群体的多模态信息获取辅助产品设计.docxVIP

PAGE2

面向视障与听障群体的多模态信息获取辅助产品设计

摘要

我国现有视障人士约1730万，听障人士约2780万，他们在信息获取方面面临巨大障碍。现有辅助设备功能单一，难以实现视觉与听觉信息的高效双向转换，无法满足复杂场景下的多模态信息获取需求。

本课题设计一款多模态信息转换辅助设备，核心功能包括：将视觉信息转化为触觉震动与语音描述，将语音信息转化为实时字幕与手语动画。设备采用嵌入式处理器与多传感器融合方案，实现环境感知、文字识别、语音处理与触觉反馈的协同工作。

论文遵循“需求分析→总体设计→详细设计→实现→测试”的工程递进思路。第一章分析视障与听障群体的信息获取痛点；第二章论证语音识别、图像处理、触觉反馈等关键技术的选型依据；第三章细化功能与非功能需求；第四章完成系统架构与模块划分；第五章深入核心算法与接口设计；第六章展示关键功能实现；第七章通过功能与性能测试验证系统有效性；第八章总结成果并展望改进方向。

本设计的核心创新在于：提出视觉-触觉-听觉与听觉-视觉-触觉的双向多模态转换架构，实现触觉震动阵列与语音描述协同呈现空间信息，以及手语动画与字幕同步输出的听障辅助方案。

第一章绪论

1.1研究背景

世界卫生组织2023年数据显示，全球约有22亿人存在不同程度的视力损伤或听力损失。在中国，根据中国残疾人联合会2022年统计公报，持证视力残疾人数达1730万，持证听力