第四章二维运动估计要点详解.ppt

三、可变块运动估计 每个宏块可分为16×16，8×16，16×8，8×8的块； 当采用8×8的块时，还可进一步细分为8×4，4×8，4×4子块进行运动估计； 编码器需要对整个预测集合在每种分割模式下单独进行运动估计，得到各自运动矢量； 宏块中的子块划分越细，对运动细节逼近越精确，残差编码所需比特数越小，由此带来更多的运动矢量需要编码； 对于背景相对简单、运动不剧烈的视频用大块模式运动估计较好；对于具有复杂背景、复杂纹理或运动剧烈的则选择小块模式运动估计，细节越丰富选小块模式编码的宏块数越多。 4.4 新型运动估计技术 §6.4 新型运动估计技术 4.4 新型运动估计技术 H.264/AVC所需码率约为MPEG-2的36%、H.263的51% 、MPEG-4的61%，在很大程度上归功于?像素精度、多参考帧运动估计和可变块运动估计这三个运动估计的新特性。 4.4 新型运动估计技术 第四章 二维运动估计 4.7 基于网格的运动估计 第四章 二维运动估计 第四章 二维运动估计 第四章 二维运动估计 4.4 基于像素的运动估计 在基于像素的运动估计中，必须估计每一个像素的MV。这个方法是非常难处理的，一般会出现以下两个问题： 根据恒定亮度假设，对于锚定帧的每一个像素，在目  标帧里将会有许多具有完全相同亮度的像素。 根据光流方程，一个方程可能会有两个解。 4.4 基于像素的运动估计 为了防止这个问题的发生，一般有四种方法： 可以使用正则化技术在运动场上施加平滑约束，使得 新像素的MV受到周围像素的已找到的那些MV的约束。 可以假定每一个像素周围领域中的MV是相同的，并且 把恒定亮度假设或光流方程应用到整个领域。 可以利用另外一些不变量来进行约束，例如除导致光 流方程的亮度不变量之外，还可以假设运动中的亮度 梯度是不变的。 可以利用运动前后帧的相位函数之间的关系。 4.4 基于像素的运动估计 一般基于像素的运动估计方法有： 用运动平滑约束正则化的方法 使用多点邻域的方法 像素递归的方法 第四章 二维运动估计 4.5 基于全局的运动估计 根据摄像机和物体运动以及物体表面的几何形状，相同成像物体的两个图像间的运动场可以用平移、几何变换、仿射映射和投影来描述。如果整个运动场是由摄像机运动引起的，或者如果成像场景包含一个进行三维刚性运动的物体，那么这样的模型就可以应用在整个帧中。? 4.5 基于全局的运动估计 但实际上，很难找到一个包含单一物体的视频序列。一般由两种全局运动估计的方法： 在一个给定的运动参数集下，通过最小化预测误差来 直接估计全局运动参数。 首先用上一种方法确定像素或块的运动矢量，然后用 一种回归方法寻找与估计的运动场最匹配的全局运动 模型，这种方法也可以应用于所选定的特征点（例如 具有很强的边缘点）的运动估计。 一般常用的全局运动估计法有：健壮估计器、 直接估计法、间接估计法。 第四章 二维运动估计 4.6 基于区域的运动估计 在基于区域的运动估计中，将图像帧分割成多个区域，并估计每个区域的运动参数。 一般实现基于区域的运动估计有三种方法： 首先把图像帧分割成不同的区域（基于纹理同质性、 边缘信息以及有时通过对两帧间不同图像的分析得到 的运动边界），然后估计每个区域中的运动。 4.6 基于区域的运动估计 首先估计整个图像的运动场，然后分割得到的运动  场，使得每一个区域的运动可以用单一的参数模型描 述。这种方法也称为运动优先法，得到的区域还可以 在一些空间的连通性约束下进一步地优化。 对区域分割和每一个区域地运动进行联合估计，一般 这种方法是用一个迭代过程实现，交替地进行区域分 割和运动估计。 三维运动估计 三维运动估计指的是从物体的二维投影图像中，估算除景物里物体的实际运动。 一般三维运动估计在计算机视觉应用中用于物体跟踪（例如在车辆的制导系统中或机器人技术中），以及在基于物体的视频编码中用于物体的跟踪和运动补偿。 三维运动估计 ** 搜索方式与四步法类似，只是搜索模板换为两个菱形模板； 搜索次数9+5+4+4=22； 目前快速匹配算法中性能最优异的算法之一，1999年10月被MPEG-4采用并收入验证模型。 4.3 经典运动估计算法 菱形搜索法性能分析： 选用了大小两种形状的搜索模版，先用大模板搜索，步长大搜索范围广，进行粗定位，避免搜索窗口太小时，陷入局部最优；粗定位后，再用小模板准确定位，保证匹配精度； 搜索时各步之间相关性强，模板