CN117237279B 一种非均匀失真全景图像盲质量评价方法及系统 （江西财经大学）.docxVIP

(19)国家知识产权局

(12)发明专利

(10)授权公告号CN117237279B(45)授权公告日2025.07.08

(21)申请号202311013187.4

(22)申请日2023.08.11

(65)同一申请的已公布的文献号申请公布号CN117237279A

(43)申请公布日2023.12.15

(73)专利权人江西财经大学

地址330000江西省南昌市经济技术开发

区双港东大街169号

专利权人四川朵唯智能云谷有限公司

(72)发明人鄢杰斌饶家乐谭淄文方玉明

刘传林

(51)Int.CI.

G06T7/00(2017.01)

GO6V10/44(2022.01)

GO6V10/82(2022.01)

GO6N3/0464(2023.01)GO6N3/08(2023.01)

(56)对比文件

CN114066812A,2022.02.18

CN114972282A,2022.08.30审查员何凌炜

(74)专利代理机构北京中济纬天专利代理有限

公司11429专利代理师黄攀

权利要求书3页说明书7页附图2页

(54)发明名称

一种非均匀失真全景图像盲质量评价方法及系统

(57)摘要

CN117237279B本发明提出一种非均匀失真全景图像盲质量评价方法及系统，该方法基于眼动数据，从非均匀失真全景图像中获取非均匀失真的视口序列图像；基于多层多轴自注意力模块，提取非均匀失真的视口序列图像的多层次质量感知特征；对多层次质量感知特征进行聚合，得到多尺度质量感知信息；利用深层特征增强多尺度质量感知信息的抽象感知程度，得到最终的多尺度质量感知信息；将最终的多尺度质量感知信息输入全连接层，得到非均匀失真全景图像的预测评价分数。本发明通过采用基于多轴自注意力的特性提取特征，对多尺度特征进行聚合，并采用深层语

CN117237279B

基于眼动数据，从非均匀失真全景图像中获取非均匀失

基于眼动数据，从非均匀失真全景图像中获取非均匀失真的视口序列图像，对视口序列图像进行图像预处理

基于多层多轴自注意力模块，采用上一层输出作为下一层输入的方式提取非均匀失真的视口序列图像的多层次质量感知特征

对多层次质量感知特征进行聚合以增强特征表示并提高特征对图像质量在不同感知尺度上的敏感性，得到多尺度质量感知信息

获取多轴自注意力模块的深层特征，并采用深层语义指导的方式，利用深层特征增强多尺度质量感知信息的抽象感知程度，得到最终的多尺度质量感知信息；判断最终的多尺度质量感知信息中是否包含时间信息，若是，则采用若干门控循环单元来捕获最终的多尺度质量感知信息中每个视口序列内的时间特征，对视口序列的时间

信息进行建模，以解决延时效应

将最终的多尺度质量感知信息输入全连接层，得到非均

匀失真全景图像的预测评价分数

步骤1

步骤2

步骤3

步骤4

步骤5

CN117237279B权利要求书1/3页

2

1.一种非均匀失真全景图像盲质量评价方法，其特征在于，所述方法包括如下步骤：

步骤1、基于眼动数据，从非均匀失真全景图像中获取非均匀失真的视口序列图像，对视口序列图像进行图像预处理；

步骤2、基于多层多轴自注意力模块，采用上一层输出作为下一层输入的方式提取非均匀失真的视口序列图像的多层次质量感知特征；

步骤3、对多层次质量感知特征进行聚合以增强特征表示并提高特征对图像质量在不同感知尺度上的敏感性，得到多尺度质量感知信息；

步骤4、获取多轴自注意力模块的深层特征，并采用深层语义指导的方式，利用深层特征增强多尺度质量感知信息的抽象感知程度，得到最终的多尺度质量感知信息；

判断最终的多尺度质量感知信息中是否包含时间信息，若是，则采用若干门控循环单元来捕获最终的多尺度质量感知信息中每个视口序列内的时间特征，对视口序列的时间信息进行建模，以解决延时效应；

步骤5、将最终的多尺度质量感知信息输入全连接层，得到非均匀失真全景图像的预测评价分数；

在所述步骤2中，采用上一层输出作为下一层输入的方式提取对非均匀失真视口序列图像特征敏感的信息内容的方法具体包括：

对非均匀失真的视口序列图像进行提取