答辩-具备硬件编码及实时特效功能的高清USB摄像头硬件功能研发.pptVIP

哈尔滨工业大学(威海)控制科学与工程系 * * * * * * * * 2015-4-10 具备硬件编码及实时特效功能的高清USB摄像头的硬件功能研发 主要内容： 课题研究背景和意义 研究内容的理论基础 研究进展与实验 总结与展望 一、课题研究背景和意义 1、升级了传统的USB摄像头工作模式，摄像头自身进行高清H.264硬件编码，使用摄像头期间减轻了电脑CPU的编码负担，也可有效减小视频传输时所需带宽，让用户体验更流畅、更高清的视频通讯。 一、课题研究背景和意义 2、利用GPU强大的图形计算能力，使实时视频特效处理成为可能。改变了传统摄像头单一的拍摄功能，为大众日常的视频通讯带来了更丰富的体验，也为媒体行业所期待的实时视频特效处理的功能提供了一个新颖的解决方案，显著减少后期的视频制作时间，让特效制作更智能，更有效率。 一、课题研究背景和意义 3、由于硬件架构的相似性，对于手机等移动设备上应用相似技术具有参考作用。 二、研究内容的理论基础 图像采集原理流程图 1、图像先从图像传感器收集模拟信号，然后经传感器上的芯片 转换成数字信号。 2、通过软件调用GPU进行图像处理。 3、整个流程处于CPU调度之下。 4、通过wifi将处理后的图片传输 到PC端得到最终图片。 二、研究内容的理论基础 OpenGL调用API进行硬件处理过程 OpenGL的硬件实现：利用OpenGL进行计算（顶点、直线、曲线、渲染、贴图），将所得到的数据交付GPU驱动程序，驱动程序进行进一步计算，最后由GPU将图像直接显示在显示器上。 二、研究内容的理论基础 GPU加速原理 一、确定顶点数据位置（vertex data），去除视野背面的顶点值，构成实物轮廓。 二、多边形转换与光源处理（TL操作），间断变连续，表面贴图。 三、着色器处理，确定每个像素的最终属性。 二、研究内容的理论基础 数据的无线传输（交叉编译） 1、建立路由器热点，利用无线网卡连接PC端和树莓派。 2、通过PC端远程控制，建立ssh连接。 3、搭建交叉编译环境。 4、软件控制图像存储传输至PC端。 三、研究进展与实验 树莓派硬件系统结构搭建 主要的硬件结构是 SoC：Broadcom BCM2835 CPU：ARM1176JZF-S GPU：Broadcom VideoCrore IV 内 存：512M 三、研究进展与实验 树莓派安装图： 三、研究进展与实验 无线通信测试结果： 哈尔滨工业大学(威海)控制科学与工程系 * * * * * * * *