基于HEVC瓦片式全景流压缩处理技术研究.pdfVIP

基于HEVC的基于瓦片的全景流压缩域处理

Y.Sánchez,R.Skupin,T.Schierl

弗劳恩海因里希（FraunhoferHHI），爱因斯坦堤岸

37号，10587柏林

全景流是一种特殊的流传输方式，其中高空间分辨率

的任意区域（RoI）被传输。它允许用户在

中进行交互式漫游，从而随时选择他们感的部

01

分。最基本的方法是每个用户与系统交互，指明所需的图1：用户交互前（t）和交互后（t）的感区域（RoI）。

RoI，然后与每个用户关联的编对所需的RoI进行编难以良好扩展。另法是使用基于瓦片的全景流媒

码。然而，这种系统不具备良好的可扩展性。因此，我们体传输，该方法由Mavlankar等人在[5]中提出。其主要

考虑基于瓦片的全景流传输方法，其中用户接收一组与其思想是将全景图像在水平和垂直方向划分为更小的区域，

RoI匹配的瓦片，并提出了一种基于H.265/HEVC的低并对这些区域进行独立编码。然后将满足r∩RoI≠

复杂度压缩域处理技术，用于基于瓦片的全景流传Ø条件的区域r（其中P是全景图像中所有区域的集合）

输。该方法从选定的瓦片生成单一码流，使得可以使传输给用户。换句话说，将包含感区域内容的区域

用单一硬件器RoI流。传输给用户。尽管过去也尝试过其他一些方法，例如使

用H.264/SVC对缩略图视图进行某种分层预测[6]，但

索引术语—全景流、HEVC、瓦片（Ti）、处使用H.265/HEVC的基于瓦片的全景流传输的优势

理、拼接在于可以使用器。

1.引言[6]或[7]提出了对全景所分割瓦片尺寸的优化

方案。请注意，这些区域/瓦片的边界不一定与RoI边界

全景流是一种特殊的流形式，其中传输的

一致，因此可能会传输一些非RoI的冗余数据。空间尺寸

是高空间分辨率中任意感的区域

较大的瓦片虽然可以提高压缩效率，但也会导致传输

（Region‑of‑Interest，RoI）。用户可以通过在任意时

非RoI区域的数据。

刻选择他们感的RoI来浏览。图1展示了一个示

例，其中显示了全景的空间平面以及两个RoI。左侧

这些前期研究假设每个接收到的空间区域都需要一个独

0

区域是用户在时间t所看到的内容，右侧区域则是在用户立的器进行。然而，在许多实际情况下，设备仅使用

1

交互（即RoI切换）时间t所显示的内容。单个硬件加速器以实现实时能力或节省电池电量。因

目前已有原型系统和部署方案展示了全景流的此，在本文中，我们采用[8]中的技术，将使用H.265/HEVC