CN113034348B 图像处理方法、装置、存储介质及设备 （北京字节跳动网络技术有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利

(10)授权公告号CN113034348B(45)授权公告日2025.01.10

(21)申请号202110312618.1

(22)申请日2021.03.24

(65)同一申请的已公布的文献号申请公布号CN113034348A

(43)申请公布日2021.06.25

(73)专利权人北京字节跳动网络技术有限公司地址100041北京市石景山区实兴大街30

号院3号楼2层B-0035房间

(72)发明人程京焦少慧

(74)专利代理机构北京远智汇知识产权代理有限公司11659

专利代理师范坤坤

(51)Int.CI.

GO6T11/40(2006.01)

GO6T11/00(2006.01)

GO6N3/0475(2023.01)

GO6N3/045(2023.01)

GO6N3/094(2023.01)

GO6V10/764(2022.01)

G06N3/0455(2023.01)

G06V10/82(2022.01)

(56)对比文件

JP2008204035A,2008.09.04WO2020242508A1,2020.12.03

审查员曹文靖

权利要求书2页说明书15页附图7页

(54)发明名称

获取原始图像的扩展方向上的边缘图像信息根据所述边缘图像信息从至少两个候选扩展方式中选择

获取原始图像的扩展方向上的边缘图像信息

根据所述边缘图像信息从至少两个候选扩展方式中选择目标扩展方式

采用所述目标扩展方式对所述原始图像进行处理，得到目标图像

101

102

103

(57)摘要

CN113034348B本公开实施例公开了图像处理方法、装置、存储介质及设备。该方法包括：获取原始图像的扩展方向上的边缘图像信息；根据所述边缘图像信息从至少两个候选扩展方式中选择目标扩展方式；采用所述目标扩展方式对所述原始图像进行处理，得到目标图像。通过采用上述技术方案，针对于需要进行扩展的原始图像，可以根据扩展方向上的边缘图像信息来灵活选取更加合适的扩展方式，相比于固化地采用单一的扩展方式来

CN113034348B

CN113034348B权利要求书1/2页

2

1.一种图像处理方法，其特征在于，包括：

获取原始图像的扩展方向上的边缘图像信息；

根据所述边缘图像信息从至少两个候选扩展方式中选择目标扩展方式；所述至少两个候选扩展方式中包括第一方式和第二方式，所述第一方式基于针对边缘像素进行复制来实现，所述第二方式基于神经网络模型来实现；

采用所述目标扩展方式对所述原始图像进行处理，得到目标图像；

其中，根据所述边缘图像信息从至少两个候选扩展方式中选择目标扩展方式，包括：

根据所述边缘图像信息确定边缘区域的图像内容的复杂度；其中，采用第一指标和第二指标衡量所述复杂度；所述第一指标包括边缘区域的像素值的均方差，所述第二指标包括边缘区域的灰度值；

当所述复杂度低于或等于预设复杂度时，将所述第一方式确定为目标扩展方式；

当所述复杂度高于所述预设复杂度时，将所述第二方式确定为目标扩展方式；

其中，当所述均方差小于或等于第一预设复杂度阈值，或，所述灰度值大于或等于第二预设复杂度阈值时，确定所述复杂度低于或等于预设复杂度。

2.根据权利要求1所述的方法，其特征在于，当所述目标扩展方式包括所述第二方式时，所述采用所述目标扩展方式对所述原始图像进行处理，包括：

根据所述扩展方向对应的扩展长度从所述原始图像中截取原始子图像；

根据所述原始子图像生成掩码图像，其中，所述掩码图像的尺寸大于所述原始子图像的尺寸；

将所述原始子图像和所述掩码图像输入至目标图像生成网络中，得到所述目标图像生成网络输出的生成图像；

从所述生成图像中截取扩展图像，并根据所述原始图像和所述扩展图像生成目标图像。

3.根据权利要求2所述的方法，其特征在于，在所述将所述原始子图像和所述掩码图像输入至目标图像生成网络中之前，还包括：

对所述原始图像进行图像风格识别，得到目标图像风格；

根据所述目标图像风格查询预设对应关系，以获取目标图像生成网络，其中，所述预设对应关系中包含不同图像风格与图像生成网络的对应关系。

4.根据权利要求2所述的方法，其特征在于，所述目标图像生成网络通过对预设网络模型进行训练得到，所述预设网络模型基于生成对抗式网络实现，所述预设网络模型的训练过