基于多屏协同的智能电视人机交互系统-计算机应用与软件.pdfVIP

第３３卷第１１期　　　 计算机应用与软件 Ｖｏｌ３３Ｎｏ．１１ ２０１６年１１月　　 ＣｏｍｐｕｔｅｒＡｐｐｌｉｃａｔｉｏｎｓａｎｄＳｏｆｔｗａｒｅ Ｎｏｖ．２０１６ 基于多屏协同的智能电视人机交互系统 １，２ １ １ １ 黄兴旺 　孙　鹏 　韩　锐 　刘春梅 １（中国科学院声学研究所国家网络新媒体工程技术研究中心　北京 １００１９０） ２（中国科学院大学　北京 １００１９０） 摘　要　　基于多屏协同的智能电视人机交互系统定义了移动设备对智能电视的远程操控和文本输入的通信机制，以解决用户对 智能电视的操作不灵活的问题，尤其改善用户的文本输入操作体验。该通信机制稳定、可扩展性强，适用于不同平台的远程操控和 文本输入需求。该系统基于ＵＰｎＰ协议实现了快速连接移动设备和智能电视，并且以Ａｎｄｒｏｉｄ系统广播机制和输入机制为依据，提 出了基于虚拟驱动的输入扩展机制，达到了原生鼠标键盘事件的效果，实现了利用移动设备对智能电视进行交互控制的设计。实验 证明，该人机交互系统，具有无缝连接、操作简单的优点，尤其适合用户进行文本输入操作。 关键词　　Ａｎｄｒｏｉｄ平台　智能电视　移动设备　人机交互　ＵＰｎＰ协议　远程操控　文本输入 中图分类号　ＴＰ３　　　　文献标识码　Ａ　　　　ＤＯＩ：１０．３９６９／ｊ．ｉｓｓｎ．１０００３８６ｘ．２０１６．１１．０１２ ＳＭＡＲＴＴＶＨＵＭＡＮＣＯＭＰＵＴＥＲＩＮＴＥＲＡＣＴＩＯＮＳＹＳＴＥＭＢＡＳＥＤ ＯＮＭＵＬＴＩＳＣＲＥＥＮＣＯＬＬＡＢＯＲＡＴＩＯＮ １，２ １ １ １ ＨｕａｎｇＸｉｎｇｗａｎｇ 　ＳｕｎＰｅｎｇ　ＨａｎＲｕｉ　ＬｉｕＣｈｕｎｍｅｉ １（ＮａｔｉｏｎａｌＮｅｔｗｏｒｋＮｅｗＭｅｄｉａＥｎｇｉｎｅｅｒｉｎｇＲｅｓｅａｒｃｈＣｅｎｔｅｒ，ＩｎｓｔｉｔｕｔｅｏｆＡｃｏｕｓｔｉｃｓ，ＣｈｉｎｅｓｅＡｃａｄｅｍｙｏｆＳｃｉｅｎｃｅｓ，Ｂｅｉｊｉｎｇ１００１９０，Ｃｈｉｎａ） ２（ＵｎｉｖｅｒｓｉｔｙｏｆＣｈｉｎｅｓｅＡｃａｄｅｍｙｏｆＳｃｉｅｎｃｅｓ，Ｂｅｉｊｉｎｇ１００１９０，Ｃｈｉｎａ） Ａｂｓｔｒａｃｔ　　ＴｈｅｓｍａｒｔＴＶｈｕｍａｎｃｏｍｐｕｔｅｒｉｎｔｅｒａｃｔｉｏｎｓｙｓｔｅｍｂａｓｅｄｏｎｍｕｌｔｉｓｃｒｅｅｎｃｏｌｌａｂｏｒａｔｉｏｎｄｅｆｉｎｅｓａｃｏｍｍｕｎｉｃａｔｉｏｎｍｅｃｈａｎｉｓｍｆｏｒ ｍｏｂｉｌｅｄｅｖｉｃｅｓｉｎｒｅｇａｒｄｔｏｒｅｍｏｔｅｃｏｎｔｒｏｌａｎｄｔｅｘｔｉｎｐｕｔｏｎｓｍａｒｔＴＶｓｏａｓｔｏｓｏｌｖｅｔｈｅｐｒｏｂｌｅｍｔｈａｔｕｓｅｒ’ｓｃｏｎｔｒｏｌｏｎｓｍａｒｔＴＶｉｓｎｏｔ ｆｌｅｘｉｂｌｅ，ｉｎｐａｒｔｉｃｕｌａｒｔｏｉｍｐｒｏｖｅｕｓｅｒ’ｓｅｘｐｅｒｉｅｎｃｅｏｆｔｅｘｔｉｎｐｕｔｔｉｎｇｏｐｅｒａｔｉｏｎ．Ｔｈｉｓｍｅｃｈａｎｉｓｍｉｓｓｔａｂｌｅａｎｄｈａｓｈｉｇｈｓｃａｌａｂｉｌｉｔｙ，ａｎｄｉｓ ｓｕｉｔａｂｌｅｆｏｒｔｈｅｒｅｑｕｉｒｅｍｅｎｔｏｆｒｅｍｏｔｅｃｏｎｔｒｏｌａｎｄｔｅｘｔｉｎｐｕｔｏｎｄｉｆｆｅｒｅｎｔｐｌａｔｆｏｒｍｓ．ＢａｓｅｄｏｎＵＰｎＰｐｒｏｔｏｃｏｌｔｈｅｓｙｓｔｅｍｉｍｐｌｅｍｅｎｔｓｆａｓｔ ｃｏｎｎｅｃｔｉｏｎｏｎｍｏｂｉｌｅｄｅｖｉｃｅｓａｎｄｓｍａｒｔＴＶ，ａｎｄｐｒｅｓｅｎｔｓｔｈｅｖｉｒｔｕａｌｄｒｉｖｅｂａｓｅｄｉｎｐｕｔｅｘｔｅｎｓｉｏｎｍｅｃｈａｎｉｓｍｂａｓｅｄｏｎＡｎｄｒｏｉｄｓｙｓｔｅｍ ｂｒｏａｄｃａｓｔｍｅｃｈａｎｉｓｍａｎｄｉｎｐｕｔｍｅｃｈａｎｉｓｍ，ｔｈｉｓａｃｈｉｅｖｅｓｔｈｅｅｆｆｅｃｔｏｆｔｈｅｎａｔｉｖｅｍｏｕｓｅａｎｄｋｅｙｂｏａｒｄｅｖｅｎｔｓ，ｔｈｕｓｒｅａｌｉｓｅｓｔｈｅｄｅｓｉｇｎｏｆｕｓ