一种全景视频融合方法、系统及视频处理设备.pdfVIP

(19)中华人民共和国国家知识产权局

(12)发明专利说明书

(10)申请公布号CN101931772A

(43)申请公布日2010.12.29

(21)申请号CN201010258078.5

(22)申请日2010.08.19

(71)申请人深圳大学

地址518060广东省深圳市南山区南海大道3688号

(72)发明人裴继红谢维信杨烜

(74)专利代理机构

代理人

(51)Int.CI

H04N5/74

H04N5/262

G03B37/04

权利要求说明书说明书幅图

(54)发明名称

一种全景视频融合方法、系统及视

频处理设备

(57)摘要

本发明适用于视频处理技术领域，

提供了一种全景视频融合方法，包括以下

步骤：计算待融合的n路摄像机视场到全

景视场的投影变换，并计算这n路摄像机

视场的数字化全景镶嵌视场V

法律状态

法律状态公告日法律状态信息法律状态

权利要求说明书

1.一种全景视频融合方法，其特征在于，包括以下步骤：

步骤a1，利用待融合的n个摄像机分别各采集一幅数字视频图像，并分别计算采

集到的n幅图像到全景视场的投影变换，得到n幅图像的数字化全景镶嵌视场

Vsub1/sub、Vsub2/sub、...、Vsubn/sub；其中，所述全景视场由n

路视频中的任意一路视频的视场在空间坐标方向上进行延拓后得到；

步骤a2，根据步骤a1的计算得到的n幅图像的数字化全景镶嵌视场

Vsub1/sub、Vsub2/sub、...、Vsubn/sub计算所述n幅图像的全景整

体视场VsubP/sub；

步骤a3，对所述全景整体视场VsubP/sub中的每一个像素点，计算覆盖所述

像素点的所有的镶嵌视场的相异视场边界集合Esubsk/sub；

步骤a4，计算所述像素点到每一个相异视场边界集合Esubsk/sub的距离，并

进一步根据计算得到的距离分别计算所述像素点针对于所述每一个相异视场边界集

合Esubsk/sub相关联的镶嵌视场的融合加权系数wsubsk/sub；

步骤a5，根据步骤a4的计算结果计算待融合的n个摄像机的数字化全景镶嵌视场

Vsub1/sub、Vsub2/sub、...、Vsubn/sub的融合加权系数图

Wsub1/sub、Wsub2/sub、...、Wsubn/sub；

步骤a6，计算n个摄像机的视频图像在所述数字化全景镶嵌视场Vsub1/sub、

Vsub2/sub、...、Vsubn/sub中的全景镶嵌图Tsub1/sub、

Tsub2/sub、...、Tsubn/sub；

步骤a7，结合步骤a5计算得到的n个摄像机的数字化全景镶嵌视场

Vsub1/sub、Vsub2/sub、...、Vsubn/sub的融合加权系数图和步骤a6

计算得到的全景镶嵌图Tsub1/sub、Tsub2/sub、...、Tsubn/sub，根

据如下公式计算瞬时全景视频图像TsubP/sub：

mathsmathmrowmsubmiT/mimip/mi/msubmrowmo(/mo

miX/mimo)/mo/mrowmo=/momunderovermiSigma;/mi

mrowmik/mimo=/momn1/mn/mrowmin/mi/munderoverm

rowmo(/momsubmiW/mimik/mi/msubmrowmo(/momi

X/mimo)/mo/mrowmsubmiT/mimik/mi/msubmrowmo

(/momiX/mimo)/mo/mrowmo)/mo/mrowmo,/mo/mrow

/math/maths其中X为全景视场中的像素点。

2.如权利要求1所述的方法，其特征在于，步骤a2中通过以下公式计算所