基于时空分析的手术场景三维重建方法研究.pdfVIP

JournalofImageandSignalProcessing图像与信号处理,2024,13(2),107-116

PublishedOnlineApril2024inHans./journal/jisp

/10.12677/jisp.2024.132010

基于时空分析的手术场景三维重建方法研究

*

王晓雨，孟晓亮，张立晔，宋政，韩储屺

山东理工大学计算机科学与技术学院，山东淄博

收稿日期：2024年1月29日；录用日期：2024年2月29日；发布日期：2024年3月12日

摘要

内窥镜图像的深度估计与手术场景三维重建是微创手术中提高外科医师手术效率的关键因素。本文提出

一种基于时空分析的手术场景三维重建方法，深度估计网络采用编码器–解码器结构，编码器使用

ResNet34模块、改进的SAB注意力机制、改进的FPN模块以及特征增强模块；解码器通过上采样获取图

像的深度信息和位姿信息，实现内窥镜图像的准确深度估计。在跟踪重建方面，通过时空跟踪优化相机

位姿，将空间维度的深度信息与时间维度相结合，通过时空分析与融合，还原手术场景的三维结构。评