基于增强现实的智能眼镜——虚拟显示屏设计文档.PDF

基于增强现实的智能眼镜——虚拟显示屏设计文档 队员：寇梓黎 学号 队员：郑 添 学号 队员：赵雅茹 学号 第一部分 设计概述 /Design Introduction 本作品制作了一个基于增强现实的智能眼镜，通过数字摄像头捕获外界图像，经过加工 处理后再显示出来，提供给使用者增强现实的体验。我们做到在智能眼镜反馈的影像中， 根据现实中存在的任意平面，投影一个现实不存在的屏幕，并可进行点按，触摸操控等交 互。 基于这个增强现实的屏幕，我们可以实现“实时翻译”、“点按窗口交互”、“涂鸦画 板”等等功能，我们将实现这些增强现实功能的处理核心、视觉传感器和显示设备都集成 在了一个眼镜上，具有易操控，易观察，易携带等实际意义。 1.1 设计目的 在集成电路、通讯技术飞速发展的时代，显示技术也需要新的突破。我们将显示技术和 移动设备的趋势——可穿戴设备相结合，再应用于增强现实，实现了可穿戴设备的增强现 实显示。 1.2 应用领域 增强现实、可穿戴设备、高速信息处理、物联网终端。 1.3 适用范围 本作品为一显示设备，通过与上层应用软件的配合，可实现对现实中存在的平面上的 文字进行实时翻译并覆盖显示，也可触摸点按现实平面中的对象进行界面窗口跳转，推送 资讯和讲解。本作品显示效果流畅，对图像信息进行了高速处理，具有增强现实、可拓展 性、应用场景广泛的特点。 1 这里我们演示两个关于本作品的功能演示，效果如图。 2 第二部分 系统组成及功能说明 /System Construction Function Description 2.1 系统介绍 本系统包括：摄像头模块、VGA 输出模块、VGA 转AV 模块、显示模块、电源模块、虚拟 触摸屏幕模块。系统流程图如图一： 图1：流程图 现实中存在一平面，虚拟触摸屏幕模块对现实平面进行触摸、点按操作后，摄像头模块 采集到现实图像信息，经过FPGA 加工处理，通过VGA 接口输出，VGA 输出的图像经过转换 成为AV 格式图像，最后显示到我们的眼镜显示器中。 2.2 各模块介绍 1.摄像头模块 采用OV7670 摄像头，其最大支持输出640*480 分辨率每秒30FPS 的彩色图像，具有体 积小，工作电压低，图像功能齐全的功能。我们通过SCCB 总线控制，使用FPGA 配置OV7670 的寄存器，使其输出640*480 分辨率的RGB565 图像，FPGA 以25MHz 频率采集像素点并存 储在SRAM 中。 2. VGA 输出模块 FPGA 以25MHz 频率从SRAM 中读取得到每一帧图像的像素点，并将RGB565 格式的图像 3 转换成RGB444 的12 位彩色RGB 图像，通过VGA 输出模块输出到显示设备。 此外，我们自制了PMODS 转OV7670 模块和PMODS 转VGA 模块，利用开发板的两个PMOD 口 直接转接摄像头和VGA，即插即用，性能稳定，效果如图2： 图2：PMODS 转VGA、PMODS 转0V7670 的PCB 制板 3. VGA 转AV 模块 由于我们的显示设备为AV 视频信号输入，故需要将VGA 信号转换成AV 信号。这里采 用成品模块EKL，可以调节AV 输出的视频大小和位置方向等参数。 4. 显示模块 为了实现既能够看到现实世界，又能够看到我们输出的视频图像，我们选用了单目显示 器。单目显示器能够输入最大640*480 的图像，近距离视觉体验良好，且配合VGA 转AV 模 块，能够满足本作品的需求。现实设备如图3： 图3：显示设备实物图 4 5.虚拟触摸屏模块 我们在现实中任意平板上布 4 个绿点，智能眼镜能够判断 4 个