国际交流 辅具开发 智能手语翻译器.docVIP

特殊教育专业资源库 第 PAGE 2 页 共 NUMPAGES 3 页 特殊教育专业资源库 聋人可发出声音看到声音 这智能手语翻译器很情怀 2017-05-22 19:25 世界上有各种各样的残障人士，这些人或不能说话，或听不见声音，有些人或许有帕金森综合症而不能提笔写字，总之就是因为各种不方便让其在这个世界上生活极为不方便。 曾经有一位聋哑人这么说，当别人知道我是聋哑人之后都主动帮助我，可是这却深深刺痛了我的心，因为在他们眼中我不是一个正常人，而这恰恰是我最在乎的东西。 近年来，随着智能穿戴设备的兴起，越来越多的科研人士都希望用智能穿戴设备帮助残障人士过上正常人的生活。例如，在微软开发者大会上，微软创意总监Haiyan Zhang介绍了一款她主导的可穿戴产品，可以帮助帕金森患者重新找回用笔写字的能力。 在国内，也有类似神奇的人，研发出的智能穿戴设备帮助聋哑人实现了“看见声音、听见声音“的梦想，而且她们还是90后。 4月25日， “极?致未来”责任创新挑战赛于北京举行，现场邀请了包括联合国开发计划署国别主任文霭洁、谷歌首席科学家Yoav Shoham等在内的11位评委嘉宾，经过激烈的竞技比拼，最终来自清华大学和北京航空航天大学的“看见声音，听见手语”团队摘夺桂冠。 据悉，该团队研发的智能穿戴翻译器，是基于臂环的手音手语翻译系统创意。 该智能穿戴翻译器内置各种传感器，在听障人士在打手语的过程中，通过采集听障人士打手语时产生的肌电信号、手臂加速度信号并将其转换为语音来解决听障人士的沟通难题。 所以，听障人士在与正常人交流时，其可以佩戴臂环，该翻译器可将手语动作翻译成语音，正常人的语音便转化成文字在显示屏上显示，从而实现两者无障碍交流。 两名团队成员都是学霸，富有爱心 在“看见声音、听见声音”团队中，两名团队成员曾是同一宿舍的闺蜜，两个人都极富有爱心。黄爽在大学时代就曾做过聋哑人志愿者，而王娜娜也有一位聋哑人挚友，由于自身不懂手语导致在交流上存在障碍。 特别是在感受到聋哑人在生活上极为不便之后，黄爽便萌生创意，决定要为聋哑人做些什么，于是决定研发智能穿戴翻译设备，帮助聋哑人士，让他们可以“看见声音、听见声音”于是，一群志同道合之人踏上了梦想的征程。 为了实现梦想，团队成员实验了很多种方法，最后才确定采用“通过臂环捕捉肌肉信号的方法”。最难的部分就是如何确保手语数据的准确性，因为只有在捕捉到信号之后翻译正确，才能实现数据的正确翻译以及无障碍交流。 为此，黄爽和王娜娜不停的进行实现模拟，整天带着臂环重复做动作，就是为了数据的准确性。不仅如此，其还联合天津理工大学人工学院合作进行数据采集和智能臂环的研发。为了验证数据的准确性，其还与多个残联机构合作，为了提供相关的服务以及咨询支持。 功夫不负有心人，“手音”最后涵盖了200个手语动作，为了保证翻译的准确性，在一个动作上都重复录制了上千次。还建立了自己的数据库以及7层BP神经网络(一种按误差逆传播算法训练的多层前馈网络，是目前应用最广泛的神经网络模型之一)对数据速度进行训练，目前识别准确度已经达到95%。 对于未来，黄爽则希望完善该设备，希望其可以帮助更多听障人士实现无障碍交流，让其能够像正常人一样生活，在社会上获得工作机会以及更多平等的社会资源。