多媒体交互界面设计 人机交互和多媒体交互-人机交互.ppt

******************第二讲：人机交互和多媒体交互多媒体交互界面设计01人机交互WORKREPORT√定义√形式√关键技术√交互设备√移动和网络环境下的交互方式所谓交互，就是互相作用——在长期的历史进程当中，人和各种人工制品互相作用，在人们使用人工制品时，人和人工制品之间就产生了交互的关系交互01人机交互（Human-ComputerInteraction,简写HCI）：是指人与计算机之间使用某种对话语言，以一定的交互方式，为完成确定任务的人与计算机之间的信息交换过程。人机交互02交互和人机交互按对象分为人——人（通过计算机），人——机，机——机，机——人，每种形式在信息的表示和传递方面都可能有一些变化，可能仅仅是数据转移、不做变化；也可能在信息传递时形式被转换数据被重新组织，格式被改变，表现也被改变。人机交互的形式1.精确交互方式：是指一种交互技术来完全说明人机交互目的的交互方式，系统能精确确定用户的输入。例如触摸屏幕。按精确度分为精确交互方式，和非精确交互技术：人机交互的形式非精确交互技术：人机交互的形式非精确交互技术是指用户利用不能精确输入的交互装置（如语音识别系统，视觉追踪系统）进行的交互。例如微信语音转文字。主要有以下几种技术：（1）语音（Voice)主要以语音识别为基础，但不强调很高的识别率，而是借助一定的AI技术进行交互。案例1（2）姿势（Gesture)主要利用数据手套、数据服装等装置，对手和身体的运动进行跟踪，完成人机交互。使用者可以让双手在空中弹钢琴（它可以精确到你的指尖的每个动作和手指关节的变化）非精确交互技术：人机交互的形式非精确交互技术是指用户利用不能精确输入的交互装置（如语音识别系统，视觉追踪系统）进行的交互。例如微信语音转文字。主要有以下几种技术：（3）头部跟踪（Head-Tracking）主要利用电磁、超声波等方法，通过对头部的运动进行定位交互。案例2（4）视觉跟踪（Eye-Tracking）以眼睛作为一种指示装置的交互方式。凝视ebay的注意力热点图表示用户在电话号码输入框上耗费了最多的注意力眼动跟踪技术姿势识别技术表情识别技术关键技术关于眼动的本质，Just和Carpenter提出了“眼——心理”（Eye--Mind）假说，该假说认为眼球运动为“注意力分配到了哪儿”提供了动态追踪技术。主要通过视线追踪技术，监测用户在看特定目标时的眼睛运动和猪是方向，并进行相关指标分析。人体姿势识别是人机交互发展的一个关键技术，人通过做各种姿势，将想要表达的信息传递给计算机，而计算机通过识别人体的动作已达到准确理解人体动作的含义。表情识别是指从给定的经验图像或动态视频序列中分离出特定的表情创业，从而确定被识别对象的心理情绪，表情识别技术一般是通过人脸检测、表情特征提取、特征选择、表情分类器算法来进行研究，分类√形式√关键技术√交互设备√移动和网络环境下的交互方式交互设备按信息流向分为：输入设备、输出设备。输入设备文本输入设备：键盘三维信息输入设备：三维扫描仪、动作捕捉设备（用于捕捉用户的肢体甚至是表情动作）指点输入设备：鼠标、光笔、控制杆、触摸板、触摸屏。输出设备显示器：主要输出设备,它与键盘一起构成最基本的人机对话环境打印机图像输入设备：二维扫描仪、摄像头（捕捉动态场景最常见的工具）指点设备优势是：与视觉关系密切，直观性好，使用户将注意力集中于屏幕，可操作性更快减少差错，满意感好语音交互设备传统方式一般为物理键盘输入，移动端特有的输入方式为虚拟键盘。实际上，移动端也经历过物理键盘的年代，但是为了获得更大的可视范围，引入了虚拟键盘。虚拟键盘带来了很大的好处：灵活的键盘输入模式、更大的屏幕可视范围，更低的按键损坏率。当然也会带来一些负面影响，但瑕不掩瑜。虚拟键盘更适合对便携性有较高要求的移动端设备。01移动和网络环境下的交互方式虚拟键盘输入传统方式为键盘输入，移动端特有的输入方式为语音输入。这是考虑移动端键盘输入比较不方便，而且输入场景复杂，配合语音输入在某些场景可以带来更多的方便和趣味。语音输入02移动和网络环境下的交互方式传统方式为点击某个按钮调整图片显示百分比（或快捷键）。移动端特有方式为双指张开或合上，可以对图片等进行放大缩小控制。这是考虑了手指直接操作的特性，更符合移动端直接控制与自然交互的要求。双指放大、缩小03移动和网络环境下的交互方式传统方式一