CN115115691B 单目三维平面恢复方法、设备及存储介质 （五邑大学）.docxVIP

(19)国家知识产权局

(12)发明专利

(10)授权公告号CN115115691B(45)授权公告日2025.07.08

(21)申请号202210739676.7

(22)申请日2022.06.28

(65)同一申请的已公布的文献号申请公布号CN115115691A

(43)申请公布日2022.09.27

(73)专利权人五邑大学

地址529000广东省江门市蓬江区东成村

22号

专利权人中德(珠海)人工智能研究院有限公司

(72)发明人常青玲崔岩任飞徐世廷杨鑫

(74)专利代理机构广州嘉权专利商标事务所有限公司44205

(51)Int.CI.

G06T7/593(2017.01)

GO6V10/44(2022.01)

GO6V10/764(2022.01)GO6V10/82(2022.01)GO6N3/045(2023.01)

GO6N3/088(2023.01)

(56)对比文件

CN114026599A,2022.02.08

CN114266814A,2022.04.01

审查员石松婷

专利代理师孙浩

权利要求书2页说明书9页附图3页

(54)发明名称

单目三维平面恢复方法、设备及存储介质

(57)摘要

CN115115691B本发明公开了一种单目三维平面恢复方法、设备及存储介质，方法包括：对输入图像进行多尺度特征提取，得到两个尺度下的第一特征图和第二特征图；将第一特征图分别输入第一内编码器和第一外编码器，分别提取得到第一特征图中第一图像块的第一内部特征和各个第一图像块之间的第一关联特征；将第一内部特征和第一关联特征融合后输入到第一解码器进行解码，得到预测平面参数和预测平面区域；根据平面参数和平面区域进行三维恢复，得到预测三维平面。本发明通过分别提取对应特征图中图像块的内部特征以及图像块之间的关联特征，再将特征融合

CN115115691B

度。

对输入图像进行多尺度特征提取，得到两个尺度下的第一

对输入图像进行多尺度特征提取，得到两个尺度下的第一特征图和第二特征图

将第一特征图分别输入第一内编码器和第一外编码器，分别

提取得到第一特征图中第一图像块的第一内部特征和各个第

一图像块之间的第一关联特征

将第二特征图分别输入第二内编码器和第二外编码器，分别

提取得到第二特征图中第二图像块的第二内部特征和各个第

二图像块之间的第二关联特征

将第一内部特征和第一关联特征融合后输入到第一解码器进行解码，得到预测平面参数和预测平面区域

将第二内部特征和第二关联特征融合后输入到第二解码器进

行解码，得到预测非平面区域，其中，预测非平面区域用于

校验预测平面区域

根据平面参数和平面区域进行三维恢复，得到预测三维平面

S200

S300

S400

S500

S600

CN115115691B权利要求书1/2页

2

1.一种单目三维平面恢复方法，其特征在于，包括：

对输入图像进行多尺度特征提取，得到两个尺度下的第一特征图和第二特征图；

将所述第一特征图分别输入第一内编码器和第一外编码器，分别提取得到所述第一特征图中第一图像块的第一内部特征和各个所述第一图像块之间的第一关联特征；

将所述第二特征图分别输入第二内编码器和第二外编码器，分别提取得到所述第二特征图中第二图像块的第二内部特征和各个所述第二图像块之间的第二关联特征；

将所述第一内部特征和所述第一关联特征融合后输入到第一解码器进行解码，得到预测平面参数和预测平面区域；

将所述第二内部特征和所述第二关联特征融合后输入到第二解码器进行解码，得到预测非平面区域，其中，所述预测非平面区域用于校验所述预测平面区域；

根据所述平面参数和所述平面区域进行三维恢复，得到预测三维平面。

2.根据权利要求1所述的单目三维平面恢复方法，其特征在于，所述对输入图像进行多尺度特征提取，得到两个尺度下的第一特征图和第二特征图，包括：

对输入图像进行多尺度特征提取，得到两个尺度下的第一提取图和第二提取图；

对所述第一提取图和所述第二提取图分别嵌入对应的位置信息，得到两个尺度下的第一特征图和第二特征图。

3.根据权利要求1所述的单目三维平面恢复方法，其特征在于，所述将所述第一特征图分别输入第一内编码器和第一外编码器，分别提取得到所述第一特征图中第一图像块的第一内部特征和各个所述第一图像块之间的第一关