CN117857879B 图像画质增强方法、装置、电子设备和存储介质 （广州虎牙科技有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利

(10)授权公告号CN117857879B

(45)授权公告日2025.07.04

(21)申请号202410083522.6

(22)申请日2024.01.19

(65)同一申请的已公布的文献号申请公布号CN117857879A

(43)申请公布日2024.04.09

(73)专利权人广州虎牙科技有限公司

地址511495广东省广州市番禺区钟村街

(汉溪商业中心)泽溪街13号1301

(72)发明人周凡

(74)专利代理机构北京超凡宏宇知识产权代理有限公司11463

专利代理师张欣欣

(51)Int.CI.

HO4N21/4402(2011.01)

HO4N21/44(2011.01)

H04N21/2343(2011.01)

H04N21/234(2011.01)

(56)对比文件

CN110163237A,2019.08.23CN114390307A,2022.04.22CN117319708A,2023.12.29CN116797466A,2023.09.22

审查员王芬

权利要求书2页说明书11页附图3页

(54)发明名称

图像画质增强方法、装置、电子设备和存储介质

(57)摘要

CN117857879B本发明提出一种图像画质增强方法、装置、电子设备和存储介质，涉及画质增强领域。该方法根据视频流的编码码率获取码率向量，将码率向量和视频流中的每一帧待处理图像输入预先训练的图像处理模型，通过图像处理模型基于码率向量生成调整参数，并根据调整参数对待处理图像进行画质增强处理，得到待处理图像对应的高质图像；调整参数用于调整图像处理模型在画质增强处理过程中提取的特征图。由于图像处理模型可以基于编码码率对应的码率向量对提取的特征图进行调整，故图像增强效果与编码码率是高度相关的，在编码码率发生变化时，可以自适应变化后的编码码率，并保证该编码码率下的

CN117857879B

根据视频流的编码码率获取码率向量

根据视频流的编码码率获取码率向量

将码率向量和视频流中的每一帧待处理图像输入预先训练的图像

处理模型

通过图像处理模型基于码率向量生成调整参数，并根据调整参数

对待处理图像进行画质增强处理，得到待处理图像对应的高质图

像；调整参数用于调整图像处理模型在画质增强处理过程中提取

的特征图

S103

S102

CN117857879B权利要求书1/2页

2

1.一种图像画质增强方法，其特征在于，所述方法包括：

根据视频流的编码码率获取码率向量；

将所述码率向量和所述视频流中的每一帧待处理图像输入预先训练的图像处理模型；所述图像处理模型包括画质增强网络和码率调制网络；

通过所述图像处理模型基于所述码率向量生成调整参数，并根据所述调整参数对所述待处理图像进行画质增强处理，得到所述待处理图像对应的高质图像，包括：通过所述码率调制网络基于所述码率向量生成调整参数，并将所述调整参数输出到所述画质增强网络；通过所述画质增强网络基于所述调整参数对所述待处理图像进行画质增强处理，得到所述待处理图像对应的高质图像；所述调整参数用于调整所述图像处理模型在画质增强处理过程中提取的特征图。

2.根据权利要求1所述的图像画质增强方法，其特征在于，所述码率调制网络包括特征提取模块、第一调整参数生成模块和第二调整参数生成模块；所述通过所述码率调制网络基于所述码率向量生成调整参数，并将所述调整参数输出到所述画质增强网络，包括：

通过所述特征提取模块对所述码率向量进行特征提取，将得到的码率特征向量分别输出到所述第一调整参数生成模块和所述第二调整参数生成模块；

通过所述第一调整参数生成模块对所述码率特征向量进行特征提取，并生成第一调整参数输出到所述画质增强网络；

通过所述第二调整参数生成模块对所述码率特征向量进行特征提取，并生成第二调整参数输出到所述画质增强网络。

3.根据权利要求2所述的图像画质增强方法，其特征在于，所述画质增强网络包括编码器、解码器和残差连接模块，所述编码器的输入端和所述解码器的输出端均与所述残差连接模块相连，所述编码器的输出端与所述解码器的输入端相连；所述通过所述画质增强网络基于所述调整参数对所述待处理图像进行画质增强处理，得到所述待处理图像对应的高质图像，包括：

通过所述编码器对所述待处理图像进行特征提取，并根据所述第一调整参数对所述编码器中提取的深度特征图的数据分布进行调整，最终输出编码器特征图