《视频传输中的图像处理》141017.pptVIP

视频传输中的图像处理 万德 刘珂铭 图像处理的介绍 数字图像处理，用计算机对图像进行分析，以达到所需结果。 图像处理可以增强图像的质量，或者改变图像的大小以适应传输环境。 常用软件PS 常用工具FFMPEG（工业级图像格式库） 过程 视频传输中，视频采集设备（如摄像头）将采集的图像数字化后，进过压缩后传输给远程接收端，接收端收到解压，这时就需要进一步地进行处理。 图像的基本处理 图像处理时，常用16位和32位表示一个像素 16位：R（5）G（6）B（5） 32位： A（8） R（8）G（8）B（8），A（透明度在视频处理中一般不用） 16位到32位转换方法 运用SHL,SHR指令对RGB进行偏移，实现RGB的扩展或压缩 所以32位到16位时会丢失颜色值，造成图像质量下降 但是16位的像素单元处理速度非常快 图像的基本处理 旋转 首先旋转要确定一个中心点。 旋转的实现并不是根据源点计算目标点的位置，因为那样的话，你会在屏幕上看到有很多小洞的千仓百孔的旋转图像。 正确的方式是先计算旋转以后的图像的长和宽，然后依次计算其在源图中的位置。 旋转效果 图片向左旋转45度 图像的基本处理 缩放 缩放和旋转一样，也是“反过来”取得像素的。 图像缩放的实现方法主要有以下3种，质量越高，消耗时间越长 临近插值法 双线性插值法 立方卷积插值法 tips：现代浏览器由于都支持GPU加速，所以不管采用什么算法， 他们的渲染效率都不会相差太远 图像的基本处理 双线性插值法 插值公式: f(i+u,j+v) = (1-u)*(1-v)*f(i,j) + (1-u)*v*f(i,j+1) + u*(1-v)*f(i+1,j) + u*v*f(i+1,j+1) 详细说明: 比如一个点缩放后是x,y，那么要去寻找的坐标一共有4个，叫做采样点，分别是(i,j),(i,j+1),(i+1,j),(i+1,j+1) 。i,j是被缩放图片中的坐标点。 先计算缩放比例scale_x,scale_yx*scale_x = i+uy*scale_y = j+vu,v是坐标的小数部分，也就是说： 假如缩放比例为1.25 , x = 10,那么 i = 12 , u = (12.5-12) = 0.5 图像的基本处理 原图 双线性插值法 临近插值法 视频图像的处理 FFMPEG ffmpeg是一个开源免费跨平台的视频和音频流方案，属于自由软件，采用LGPL或GPL许可证（依据你选择的组件）。它提供了录制、转换以及流化音视频的完整解决方案。 ffmpeg支持asf，avi，bfi，iff，flv，mp4，h264等格式 h264格式是目前视频传输应用中图像压缩率最高，对应图像效果最好的一种编码方式 视频图像的处理 去噪 采用均值滤波器，自适应维纳滤波器 ，中值滤波器 ， 形态学噪声滤除器 ，小波去噪等算法进行图像的去噪操作，可以去除图像中的噪声奇点 均值滤波 中值滤波 1 1 1 1 1 1 1 1 1 1 2 3 4 5 6 7 8 9 视频图像的处理 锐化 锐化是对图像边缘模糊区域进行聚焦，可以加强图像中的边缘，轮廓等。 在视频采集时，由于摄像头的不同可能图像的清晰度也有好坏，有时需要更好地识别图像中的信息，比如二维码扫描，就可以对图像进行锐化后保存。 4个方向的梯度算子（Sobel算子） -1 -2 -1 0 0 0 1 2 1 1 0 -1 2 0 -2 1 0 -1 1 2 1 0 0 0 -1 -2 -1 -1 0 1 -2 0 2 -1 0 1