开题报告 多通道人机交互技术信息整合机理初探.pdfVIP

表4 -2 （自然学科学生用） 天津师范大学20 08届本科毕业论文 （设计）开题 报告 学院：物理与电子信息学院 系别：电子系 专业 （专业方 向）：电子信息科学与技术 论文题 多通道人机交互技术信息整合机理初探 目 指导教 学生姓 职称 学号 师 名 一、研究目的 （选题的意义和预期应用价值） 人机交互多通道交互技术是当前信息产业竞争的一个焦点，世界各国都将 此作为重点研究的一项关键技术。旨在提高人机交互的自然性和高效性，克服 传统人机交互方式的缺陷。对多通道人机交互技术信息整合机理进行研究，具 有理论与实用价值。它与认知学、人机工程学、心理学等学科领域有密切的联 系。 二、与本课题相关的国内外研究现状，预计可能有所突破和创新的方 面 （文献综述） 人机交互技术是指通过计算机输入、输出设备，以有效的方式实现人与计 算机对话的技术。它包括机器通过输出或显示设备给人提供大量有关信息；人 通过输入设备给机器输入有关信息及回答问题等。传统的人机交互为手动输 入。目前开发或研究的人机交互手段有语音输入、手写文字输入、视线跟踪输 入及复合型多通道输入。 多通道人机交互技术的关键技术就是多通道信息整合机理。Nigay 在 PAC Amodeus 系统中提出了一种“融合槽 (melting pot)”整合机制，它采取规则驱动 策略，将每一个输入事件映射成一组具有时间戳的“结构性部件 (structural parts)”或语义槽，然后根据时间的接近性将它们融合在一起。虽然这种机制具 有领域无关性，但是它要求多通道任务必须是不交织的，甚至不能与单通道任 务交织，这在实际上是不现实的。在多通道系统 QuickSet 中，Johnston 采取了 一种“基于合一化 (unification—based)” 的整合方法，多通道的输入被转化成一 定类型的特征结构。这些特征结构代表不同通道对语义的相应贡献。合一化操 作通过判断这些残缺不全的特征结构是否具有语义上的一致性，将有一致性的 特征结构合并，最后形成系统能够理解的完整形式。与“框架融合”方法相 比，“合一化”方法与其具有部分相似性，但却比前者具有更好的通用性、可理 解性以及可重用性。国内在多通道整合方面也做了非常有意义的工作,陈敏、 罗军以“格 (1attice)”代数结构为基础描述了一种整合模型，它假定来自用户的 多通道输入在一个任务内部是并行的，即不同任务在输人流中的跨度不相交， 任务之间形成所谓“格” ，通过对“格”进一步分“结”,一旦确定了一个分节 的“结” ，就可以对位于其上方的任务参数进行语义整合。该方法同样存在对时 间依赖性比较大的问题，而且要求多通道输入在一个任务内部的并行性限制了 用户实际操作的灵活性和自然性。 通过本课题研究，将对多通道人机交互技术信息整合机理进行分析、总结 与研究，力图对其理解更加深入。 三、分析研究的可能性、基本条件及能否取得实质性进展 （方案论 证） 由于多通道人机交互技术的复杂性，以及由于本人对于多通道人机交互技 术涉猎未深，本人将在总结前人研究工作的基础上，对多通道人机交互技术的 多通道信息整合机理进行初步研究；对视线跟踪技术在多通道人机交互中的应 用进行较为深入的研究。 四、课题研究的主要方法、策略和步骤 研究方案基于数字图像处理技术。在实验室已实现的单摄像机视 线跟踪技术的基础上，通过对眼控鼠标技术的研究、评估与完善，摸 索基于视线跟踪的交互技术；在此基础上吸收国内外最新研究成果， 进行多通道交互技术的研究。 五、研究进度安排 2007年11月~ 12月 进行相关资料收集、完成开题报告； 2008年1月~2月 进行眼控鼠标技术的研究、评估与完善； 2008年3月~4月 进行多通道交互技术的研究； 2008年5月上旬 总结研究工作、撰写论文初稿