视频新技术.pptVIP

专题讲座视 频 新 技 术 纲 要 视频简介 智能监控——检测、跟踪和识别 视频压缩编码 多视点三维立体视频 视频的超分辨率重建 一、视频简介 视频是什么? 研究什么问题? 采集 RGB采集卡，VGA采集卡，高清采集卡，多视点采集 压缩、存储 MPEG1，MPEG2，MPEG4，H.264/AVC，AVS，H.265 CD，DVD，EVD/BD，etc. 传输 Internet，Wireless network 重建、显示 HD，HR，3D 热点的需求是什么？ 智能视频监控/物联网 企业，工业，农业，军事，交通，学校，银行，家庭…… /programs/view/SIloV1llS08/ 高清，高效，可靠的视频压缩编码标准 HDTV，H.264，H.265 针对不可靠网络的错误恢复技术 三维立体视频 3D 电影， 3D游戏，身临其境 二、智能监控检测、跟踪和识别 智能检测 一般步骤： 定义一系列弱分类器：如肤色，特征（轮廓规则，五官分布，对称性规则，运动规则）等 弱分类器训练成强分类器、分层分类器 经典方法： 神经网络、特征脸（Eigenface）、基于样本学习方法（Example-Based Methods）、支持向量机（SVM）、隐马尔科夫模型（HMM）。 智能检测 智能跟踪 三、视频压缩编码 1、信源编码 目的：消除冗余 采用的主要技术： DCT DWT 基于宏块的编码 帧内预测 帧间预测 预测精度 2、信道编码 目的：抗信道干扰，增强通信的可靠性。 采用的主要技术： 在数据码流中插入一些码元，以便进行判错和纠错。 FEC：前向错误纠正 3、联合信源——信道编码 目的：综合考虑信源和信道，联合编码，对视频通信进行错误控制 采用的主要技术： 错误隔离 错误恢复预测 非平衡错误保护的分层编码 多描述编码 四、多视点三维立体视频 1、多视点三维立体视频 采集： 显示：/v_show/id_XMTUxNTI2NDI0.html /programs/view/LNuiT0daxFU/ 双目视频演示 立体视频需要解决的问题（1） 深度感知 视点合成 立体视频需要解决的问题（2） 视差估计 实现方法类似于运动估计 立体视频需要解决的问题（3） 立体视频编码 立体视频需要解决的问题（4） 立体视频的抗干扰能力 引入多描述编码的框架 五、视频超分辨率重建 关于分辨率 研究背景 硬件提高分辨率 什么是超分辨率技术 超分辨率重建的方法 频域重建方法 通过消除频谱混叠改善图像的空间分辨率 Eg: 基于DCT，DWT的方法 时域重建方法 利用空域的先验知识 Eg: 插值法，最大后验概率估计法，凸集投影法，自适应滤波方法 基于学习的方法 通过学习训练样本数据库来获得图像的高频细节信息。 超分辨率重建结果演示 在研课题 福建省自然科学基金：一种新型多视点视频编码算法的研究。 图像和视频的多描述编码（已结题两项国家自然科学基金） 图像和视频的超分辨率重建算法的研究 欢迎提出宝贵意见！欢迎同学们加入我们的课题组！ 视频新技术 陈婧 * 分辨率：精确检测出最小变化的能力 共同决定 红外图像 监控录像 提高成像系统分辨率 提高镜头质量 成本高 提高感光 器分辨率 减小像素尺寸 电荷干扰 增加感光器芯片尺寸 理论上有限制 电容量增加 电荷传输率 技术瓶颈 成本 Output Original Input Training patches O 超分辨率重建技术 输入低分辨率图（108x108）： 超分辨率3*3倍的结果： 视频新技术 陈婧 *