多媒体编码技术详解.ppt

多媒体技术 第3讲 * 多媒体技术 第3讲 * 多媒体技术 第3讲 * 多媒体技术 第3讲 * 多媒体技术 第3讲 * 多媒体技术 第3讲 * 多媒体技术 第3讲 * 多媒体技术 第3讲 * 多媒体技术 第3讲 * 多媒体技术 第3讲 * * * * * * * * * * * 多媒体技术 第3讲 * 多媒体技术 第3讲 * * * * * * * * * * 这里长度指整个编码的长度，如区间1，区间编码是011，即3位，而该区间的值（-1，1）只需再加1位即可表示，因此共4位。 * * * * * * * * * * * * * * * * * * * 多媒体技术 第3讲 * * 多媒体技术 第3讲 * * * * * * * * * * * * * * * * * * * * * * * * * 指图像的深浅变化与颜色变化都是连续的 * * * * * * * * * * * * * * * * * * * * * * * * * * * 例如算术编码对某条信息的输出为 1010001111，那么它表示小数 0.1010001111，也即 * * * * * * * * * * * * * * 三维电视关键技术-编码技术 多视视频、深度和辅助信息的编码 传统的立体视编码 基于深度的三维视频编码 多视点编码 三维网格编码 静态三维网格编码 动态三维网格编码 三维电视关键技术-编码技术 多视视频、深度和辅助信息的编码 传统的立体视编码 多视中视点为两个的情形是立体视中最经典的实例。 H.262/MPEG-2 中多视级别中的预测示意图 多视视频、深度和辅助信息的编码 加深度数据的视频压缩 主要方法： 1.现有国际编码标准的使用 2.共享二维彩色视频的运动矢量 （Han Oh and Yo-Sung Ho 2006 年） 3.下采样方法 (Yo-Sung Ho, Sang-Tae Na, Kwan-Jung Oh, Cheon Lee 2007年） 4. 分段线性函数的深度图编码 (Yannick Morvan, Dirk Farin, and Peter H. N. de With 2008) 三维电视关键技术-编码技术 三维电视关键技术-编码技术 多视视频、深度和辅助信息的编码 多视编码 多视编码的时间、视间预测结构 三维电视关键技术-传输技术 欧洲ATTEST计划 采用数字视频广播信道来传输压缩的MPEG-2和H.264/AVC视 频流以实现与传统数字广播电视的兼容 三菱研究院 使用已有的广播协议和压缩技术来搭建三维电视实验系统，与 现有的数字广播网络构架兼容 微软亚洲研究院 采用基于互联网的多播技术, 将摄像机阵列在不同方位同时捕获 的场景，经过压缩实时传送给用户 针对互联网信道的三维电视传输（Kurutepe，2007） 一种基于应用层多播技术的交互式三维电视传输方案， 但这种传输方案还存在很多延迟等问题 三维电视关键技术-传输技术 结合3DTV的数据表示和编码特点，可以开发研究具有服务质量（Quality of Service ，QoS）自适应能力的、面向3DTV的P2P网络流媒体传输和最优化多数据源数据调度技术和算法，例如： 基于优先级的P2P流媒体数据组织策略：在从流媒体服务器向P2P媒体分发网络发布3DTV媒体数据时，首先对媒体数据进行分割，然后在每个分割单元内部根据优先级顺序对所有音视频及其深度信息进行重新组织，使其具有一定程度的质量可伸缩性； 基于优先级的P2P流媒体传输控制机制：在任意Peer节点之间传输媒体数据时，设计有效的传输控制机制来保证最小解码单元按照上述优先级顺序依次到达接收端； QoS自适应的最优化多数据源数据调度算法：基于上述数据组织和传输控制机制，构建具有拥塞感知的率失真模型和函数，在此基础上设计具有QoS自适应能力的最优化多数据源媒体调度算法并对其性能进行分析和比较。 三维电视关键技术-合成技术 在多种三维建模和重构方法中，存在着两个趋势: 基于几何的绘制（GBR：Geometry-based Rendering） 基于图像的绘制（IBR：Ima