大屏幕交互显示设备技术方案.doc

一、科学技术内容 本项目研究开发的是一种用于政府职能部门、公共事业单位、能源系统、通讯领域、金融系统、广电系统、军事领域、教育领域电子显示系统定位方法及其装置 创新点技术 2.1 大尺寸、高精度定位技术 2.1.1多摄像头拼接触摸定位技术, 实现无尺寸限制的大屏幕交互显示 本方案的大屏幕交互显示系统由人机交互显示单元，一分三3D视频处理器，安装了双DVI输出显卡和多串口扩展卡的PC组成，其连接关系见图2。 　　　　　　　　　　　　　　　　图２　 其中人机交互显示单元由基于DLP数字光处理技术的VCL投影机、接收视频信号及控制信号的接口盒、ＣＣＤ红外摄像头、反射镜、GUCS专用防划伤屏幕、带有红外光发射功能的书写笔构成，结构示意图如图3。 　 　　　　　　　　　　　　　　　　　　图３　　 　在本方案中，每个交互显示单元的显示屏后边放置一个摄像头，摄像头完整的拍摄单个显示屏的显示画面。摄像头中包含了图像拍摄装置，图像处理装置，图像矫正装置，数据传输装置。在图像拍摄装置中可选择光学滤镜可排除环境光及其他意想不到的强光的干扰，而只通过特定的波长的光，或不使用光学滤镜而采用图像识别算法识别特定物体。在图像处理模块中通过算术变换等图像识别算法可识别物体的形状，物体的边沿，提取物体的特征点和坐标点等。在图像矫正模块中可对提取得到的物体特征做图像矫正，坐标校正。数据传输装置可传输图像及坐标数据。 每个交互显示单元中采用高速摄像头进行图像拍摄，并采用快速的图像处理算法和图像矫正算法，提取特征物体的坐标点及形状特征，可用于多点书写，多点手势操作，物体识别；各个单元中的摄像头数据传输接口与PCI多串口扩展卡相连，通过PC软件自动的识别显示单元所对应的串口编号，通过PC软件将串口通讯数据对应相应的串口编号做坐标转换处理，从而将独立的可触摸单元有机的组合成统一的可触摸桌面，通过这样组成的系统既独立又统一，各单元的触摸操作互相独立，提高了系统的稳定性，同时桌面的触摸点数是各个显示单元可触摸点数的总合。 在本方案中，要解决多人同时书写时响应速度慢以及多人书写时不能跨屏书写两大世界难题。如不能有效解决将无法实现高精度、可跨屏、多人快速同时书写。我们通过独创的分区拍摄和跨屏融合算法，圆满地解决了问题。在本方案中，每个交互显示单元相对独立，完成图像拍摄、处理和坐标点的计算，最后通过计算机软件综合处理，得出各个触摸点在整个拼接交互显示区域内的实际位置，由于各交互显示单元已经完成各自区域内的触摸点坐标计算，传送到计算机处理只是坐标数据而非图像数据，数据量极小，因此可以实现极高的触摸响应速度，即使多人同时书写也不会影响到系统的刷新速度。 而对多个交互显示单元多人同时书写的跨屏处理中，我们在跨屏融合软件算法中将每个交互显示单元视作一个对象，每个对象中都有每只光笔各自所绘制的线条保存容器（显示单元支持N支笔，则有N个线条容器）； “线条保存容器”用来保持每只笔所绘制的线条对象。由于系统中的光笔都是无差别的，且光笔在触摸时，有起笔，持续触摸，抬笔结束三种状态。假设取A、B两个交互显示单元，A在左B在右。假设在A单元中按下光笔（产生起笔信号，生成线条对象），且光笔将向右运动跨屏划线到B单元中。当光笔跨过接缝时，A单元中将产生一个抬笔结束状态，此时记录下PC的系统时间到该线条对象中去。在光笔跨过接缝到达B单元时，此时将在B单元中产生一个起笔信号，此时先判断光笔的坐标是否靠近接缝（设定笔坐标位置与接缝距离10个像素为靠近接缝）。若靠近，则从A单元中的各个线条容器中取出各自最后一个线条对象抬笔结束时间，并做时间差值比较，否则认为没有进行跨屏连接。将上一步中取得的各线条对象的抬笔结束时间与当前系统时间进行对比，若是时间差小于给定的阀值(比如30毫秒)，则再取出上述依据时间取得的各线条对象的最后抬笔点的坐标点，并计算这些坐标点与当前B单元中的光笔起笔坐标点的像素距离值，若是存在一个或者多个距离值小于给定阀值的线条最后坐标点，则认为找到跨屏连接线，并距离最小的线条为跨屏连接线；若距离都大于或等于给定的距离阀值，则认为不存在跨屏连接。当找到A单元中跨屏连接线之后，创建B单元中跨屏起笔产生的线条对象，取A单元中跨屏连接线的最后一个坐标点作为该线条对象的第一个坐标点，而将B单元中这一跨屏线的起笔坐标点作为线条对象的第二个坐标点，这样就完成了从A单元到B单元的跨屏连接。通过上述跨屏融合算法，可以有效解决跨屏书写难题。 采用本技术，显示与交互均以模块化拼接的方式，理论上可实现无尺寸限制的大屏幕交互显示。实际应用中已使交互可应用于对角线484英寸（现场演示12.29米）以上（482.4英寸X40.2英寸或12.25米