基于机器视觉的大屏幕交互式设备触控技术研究与实现-微电子学与固体电子学专业论文.docxVIP

万方数据 万方数据 THE RESEARCH AND IMPLEMENTATION OF TOUCHING TECHNOLOGY FOR LARGE-SCREEN INTERACTIVE DEVICE BASED ON MACHINE VISION A Thesis Submitted to University of Electronic Science and Technology of China Major: Microelectronics and Solid-State Electronics Author: Zhou Zuwei Advisor: Li Ping School : School of Microelectronics and Solid-State Electronics 独创性声明 本人声明所呈交的学位论文是本人在导师指导下进行的研究工 作及取得的研究成果。据我所知，除了文中特别加以标注和致谢的地 方外，论文中不包含其他人已经发表或撰写过的研究成果，也不包含 为获得电子科技大学或其它教育机构的学位或证书而使用过的材料。 与我一同工作的同志对本研究所做的任何贡献均已在论文中作了明 确的说明并表示谢意。 作者签名： 日期： 年 月 日 论文使用授权 本学位论文作者完全了解电子科技大学有关保留、使用学位论文 的规定，有权保留并向国家有关部门或机构送交论文的复印件和磁 盘，允许论文被查阅和借阅。本人授权电子科技大学可以将学位论文 的全部或部分内容编入有关数据库进行检索，可以采用影印、缩印或 扫描等复制手段保存、汇编学位论文。 （保密的学位论文在解密后应遵守此规定） 作者签名： 导师签名： 日期： 年 月 日 摘 要 摘 要 随着信息处理技术的发展，人机交互成为了人工智能技术的研究热点。大屏 幕交互式设备因其将用户从键盘和鼠标的束缚中解放出来，实现了用户直接在交 互式设备的触控屏幕上控制计算机，使得人与计算机的交互变得更直接自然而在 教育领域得到了广泛的应用，逐渐取代了依赖鼠标和键盘操作的传统多媒体技术。 在大屏幕交互式设备的多种实现技术中，基于机器视觉的大屏幕交互式设备以其 响应速度快、定位准确、容易实现超大屏幕设计、支持多点触控、成本低等优势 成为了研究热点。 本论文主要针对基于机器视觉的大屏幕交互式设备触控技术的实现进行了研 究，具体内容主要分为下列几个部分： (1) 研究 CMOS 图像传感器的寄存器配置，通过对比自动曝光调整和手动设 置曝光时间两种配置，并分析其与红外发光二极管补光的配合，选择手动设置曝 光时间的方式来获取高质量的图像，提高触控点识别率。 (2) 利用混合编程优化单片机程序，采用汇编编程加快单片机读取图像数据的 速度，使系统可以实时地处理图像传感器输出的每一帧图像。 (3) 在双目图像传感器单点触控识别和定位的基础上，设计实现了两点触控的 像素目标识别，遮挡触控点识别并通过触控点轨迹跟踪去除伪点。 (4)编写校准上位机程序，实现查找设备、绘制校准点、获取校准点坐标、进 行校准计算以及发送校准结果至单片机的功能。 (5)设计改进的均值滤波来消除静止触控点的抖动，利用拟合插值平滑触控点 运动轨迹和突破硬件速度对系统实时性提高的限制。 优化图像采集系统、实现两点触控的识别和定位、编写校准上位机程序和优 化系统性能是本论文的研究重点。通过在样机上的测试实验表明：单个触控点识 别达到了无盲点和误判点；两点触控实现了放大、缩小、旋转等 Windows 系统支 持的手势识别；静止触控点的抖动情况得到了消除；系统实时性在图像传感器工 作速度为每秒输出 60 帧图像时达到了每秒输出 120 个触控点坐标。 关键词： 人机交互，机器视觉，多点触控，校准，实时性 I ABSTRACT ABSTRACT With the development of information processing technology, human-computer interaction has become a popular research in artificial intelligence techniques. Large-screen interactive devices can free users from the shackles of keyboard and mouse so that users can directly operate computers on the touching-screen of interactive devices, then the interaction between human and computer become more