嵌入式系统实验11 视频采集播放实验.docxVIP

实验11：视频采集播放实验

一．实验目的

了解视频传输及回放的原理；

了解共享内存在视频存储中的作用；

了解视频解码模块的实现方式。

二．实验要求

掌握视频存储模块的实现方式；

掌握视频回放显示的实现方法。

编写视频解码回放的启动脚本。

三．实验设备

硬件：PC机，基于ARM9系统教学实验系统，网线，串口线，SD卡；

软件：putty软件；

环境：ubuntu系统版本12.04，内核版本kernel-for-mceb，文件系统filesys_test，内核文件uImage_zh.zh,应用层encode源码，DMAI库。

四．预备知识

概述

TI公司的基于DaVinci技术的TMS320DM365芯片，集成了一颗ARM926EJ-S内核，一个图像处理子系统（VPSS），一个H.264高清编码器协处理器HDVICP和一个MPEG-4/JPEG高清编码器协处理器MJCP，支持多格式编解码，特别适合用于图像处理。

TMS320DM365芯片上提供了一个视频处理子系统(VPSS)，用于视频数据的实时采集、播放等功能。VPSS内部集成了一个视频处理前端模块(VPFE)和一个视频处理后端模块(VPBE)，VPFE用来控制接入的外部图像采集设备，如图像传感器，视频解码器等。VPBE则用来控制接入的显示设备，如标清的模拟电视显示器，数字的LCD液晶显示屏等。

整个视频采集系统终端以TMS320DM365芯片作为处理器芯片，基本模块有DDR2SDRAM、NANDFLASH、网口、串口，以及负责进行信令和视频数据传输的3G模块等。视频采集部分主要由DM365的VPFE（视频处理前端），一个多路转换器和两个视频数据采集芯片：分别是豪威科技的OV5640和TI公司的TVP5151组成。摄像头硬件切换由DM365的GPIO口对多路转换器进行控制，

选择输入到VPFE的数据源，应用程序通过V4L2接口和DMAI接口获取VPFE

驱动中采集的视频数据。

视频数据的采集是系统的数据源获取部分，其过程是通过CCD/CMOS摄像头采集模拟视频信号并转化为数字信号。视频采集是一个从底层到上层的分层实现的过程。

实现的功能

摄像头采集模拟画面TVP5151或OV5640芯片将数字信号进行处理视频处理前端VPFE将读取的视频数据放入缓存区应用程序调用

摄像头采集模拟画面

TVP5151或OV5640芯片将数字信号进行处理

视频处理前端VPFE将读取的视频数据放入缓存区

应用程序调用DMAI接口获取VPFE驱动中采集的视频数据

图1 功能实现流程图

基本原理

V4L2（Video4Linux2）是LINUX内核中关于视频数据处理的驱动框架，为上层应用程序访问底层的视频设备提供了统一的接口。V4L2支持各种视频输入输出设备，当视频设备连结到LINUX主机上时，视频处理驱动程序会在内核上注册一个主设备号为81的字符设备用于标识该硬件，然后内核会利用主设备号将该视频设备的驱动程序与视频处理驱动程序建立关联，同时加载设备驱动程序的各功能函数，并为其分配次设备号，使该设备可以正常工作。V4L2架构如图

2所示，用户空间中的应用程序通过调用V4L2接口来访问内核空间中的设备驱动，用户空间与内核空间内存间的映射工作由V4L2接口来完成，设备的硬件在

最下层，通过各种数据总线与设备驱动建立联系。

图2 V4L2框架

V4L2框架中视频数据的具体采集流程如下所示：

打开内核设备驱动节点dev/video0。intfd=open(“dev/video0”,O_RDWR)；

2获取内核设备的capability，查询内核驱动能实现的功能。

VIDIOC_QUERYCAP，structv4l2_capability

3设置视频输入，内核驱动支持多个设备同时采集视频数据。

VIDIOC_S_INPUT，structv4l2_input

设置视频数据的分辨率和帧格式，如D1、CIF，帧格式包括图像的长宽和像素排列等。VIDIOC_S_STD，VIDIOC_S_FMT，structv4l2_std_id，structv4l2_format

向内核驱动申请缓存，用于存放采集上来的视频数据。structv4l2_requestbuffers

利用mmap()函数将内核空间申请的缓存映射到用户空间，这样应用层程序就可