高效序列紧凑描述符编码框架研究.pdfVIP

从序列中提取紧凑描述符的高效编码框架

Huang?,?,†,◦,?,黄铁军?

?数字，与计算机科学学院，，，100871，协同网络

创新，，

†信息通信，119613，新加坡

◦电子与计算机工程系，大学，，

客户端

为了实现高效且有效的图像匹配或检索任务，新兴的MPEG标CDVSCDVS

编码

准——紧凑视觉搜索描述符（CompactDescriptorsfor描述符描述符

VisualSearch，CDVS）已为静态图像了紧凑的描述符，检索或

匹配

包括压缩的局部和全局描述符。然而，CDVS描述符从序

列中进行帧级编码时并未解决帧间冗余问题，这可能会消耗大

量的带宽和资源。在本研究中，我们提出了一种高效的图1。我们方法概述。从中提取的CDVS描述符在客户

CDVS描述符编码框架，用于为序列生成紧凑描述符。对端进行编码，然后传输到服务器以进行进一步的检索或匹配任务。

于局部描述符，我们提出了一种多参考预测技术，以利用帧序

列中局部描述符和位置坐标的时间相关性。为进一步提高预测

性能，应用了关键点以识别时间上重复的关键点。对于全分析（LDA）随后进行符号二值化。Lin等人[12]提出了可扩展压缩

局描述符，采用了一种编码方式来压缩相邻帧的全局描述向量（SCFV），用于直接对向量（FV）进行二值化，

符。实验证明，所编码方法平均比特率低于40kbps，同然后进行质心基位选择。特别是新兴的MPEG[13],紧凑视觉搜

时保持了可比的匹配和检索性能。与原始帧级CDVS描述符序索描述符（CDVS），已经对紧凑局部描述符和紧凑全局描述符进行

了。研究表明，CDVS在低比特率下实现了最先进的图像匹配

列相比，所方法实现了超过25的比特率降低。

和检索性能[14]。

然而，对于从序列中提取的描述符，尤其是CDVS描述

索引术语—紧凑描述符，MPEGCDVS，点，预测符的压缩，目前的研究工作还很少。与静态图像不同，本身

编码，编码。存在所谓的时间冗余问题。的研究工作已经尝试在局部描述

符或全局描述符上解决这一问题。对于局部描述符，Markar

1.引言[15]提出了一种时间一致的关键点检测器以及帧间规范块编码技

术。Baroffio[16][17]采用了帧内和帧间编码方法来压缩SIFT和

分析应用，例如移动增强现实、视觉传感器网络和分布式

BRIEF‑like[8]描述符，其中提出了一种编码模式决策方案以提

，通常会将视觉