基于DM3730的投影式智能交互阅读装置.pptx

基于DM3730的投影式 智能交互阅读装置学 校：北京大学成 员：莫志威 翁振宇 徐之刚 战立飞 邢晓媚指导老师：朱跃生 教 授目录1目录1背景综述 人机交互技术的发展背景描述 屏幕的变革PC机手机、平板电脑我们的方案屏幕投影屏幕传统屏幕触摸屏交互方式鼠标和键盘手指触摸非接触式目录1投影式显示用笔操作手势操作目录1系统框架基于DM3730的投影式智能交互阅读装置定制阅读器手势识别红外定位无线通信ARMDSPDM3730开发板系统结构投影模块存储/处理模块嵌入式存储/处理装置微型投影仪电子书红外光位置改动后的电子书手势识别模块手势普通光学摄像头同步传输模块红外定位模块红外笔蓝牙传输器红外摄像头硬件实现投影显示模块微型投影仪红外与蓝牙传输模块数据处理模块手势识别模块WII控制器（红外摄像头）普通光学摄像头DM3730软件实现定制阅读器：针对投影下文本操作，根据手势识别和红外定位定制，利用Qt设计完成自动分页功能文字标注功能单词翻译功能软件实现角度校正：红外摄像头与投影仪存在角度偏差时n红外定位算法：红外摄像头的解码芯片将捕获的红外光源以直角坐标(x,y)形式传输给处理器软件实现开始1读取视频帧数求图片中心（连续10帧）背景建模（帧差法）判断中心运动轨迹N帧数10Y根据识别结果启动相应功能提取前景、二值化、中值滤波结束1手势识别算法目录1选择DM3730的原因DM3730的功能平台选择1GHz的ARM Cortex-A8 Core800MHz的TMS320C64x+ DSP Core支持摄像头模块支持蓝牙模块支持DVI-D显示输出，可输出高清信号对应于低功耗便携式应用而设计支持友好界面和对接口的控制满足手势跟踪与匹配算法实时性需求摄像头读入手势和红外光蓝牙用于红外光坐标传输通过DVI转HDMI线将信号输出到投影仪满足阅读器体积小、功耗低的需求总结1.确定坐标映射关系2.实现高效、稳定、实时的手势识别3.利用CWiid库提供蓝牙连接4.多线程协调处理5. ARM和DSP处理器的通信和协同工作关键设计总结1.更加自然舒适的交互方式2.体验阅读纸质书籍的感觉3.随时随地地进行相应的读写修改操作4.操作保留在电子文件中，方便保存与重复使用创新点系统展示微型投影仪红外摄像头（wii）光学摄像头开发板Thanks For Your Attention！QA