DiffUS: 从体积成像的可微超声渲染.pdfVIP

DiffUS:从体积成像的可微超声渲染

NoeBertramo,GabrielDuguey,andVivekGopalakrishnan

MassachusettsInstituteofTechnology,Cambridge,MA,USA

{noe_bert,gduguey,vivekg}@

摘要术中超声成像在众多外科手术过程中提供实时指导，但其解释受到噪

声、伪影和与高分辨率术前MRI/CT扫描对齐不良的影响。为了弥合术前

规划与术中引导之间的差距，我们提出了DiffUS，这是一种基于物理的可

本微分超声渲染器，可以从体积成像生成逼真的B模式图像。DiffUS首先使

译用机器学习方法将MRI3D扫描转换为声阻抗体积。接下来，我们通过耦合

反射-透射方程的光线追踪模拟超声波束传播。DiffUS将波传播公式化为一

中个稀疏线性系统，以捕捉多次内部反射。最后，我们通过扇形采集几何结构

1中的深度解析回波提取来重建B模式图像，并包括斑点噪声和深度依赖退

v化的现实伪影。DiffUS完全实现为PyTorch中的可微分张量操作，使下游

8

6应用如切片到体积配准和体素重建的基于梯度优化成为可能。在ReMIND

7数据集上的评估证明了DiffUS从脑MRI数据生成解剖学准确的超声图像

6的能力。我们的实现在/gduguey/DiffUS可用。

0

.

8

0Keywords:超声波·差分渲染·物理模拟。

5

2

:

v1介绍

i

x

r超声成像因其速度、安全性和便携性，在术中引导方面具有很高的价

a

值。然而，超声图像受到噪声、伪影和对比度差的影响，使得在诸如肿瘤切

除等精细任务中的解剖学解释变得复杂[17]。此外，难以对齐术中超声与高

分辨率术前MRI或CT扫描的问题迫使外科医生进行跨模态的复杂心理映

射，这些模态具有不同的视觉特征。这种脱节使得准确定位关键解剖结构、

识别残余病理和实时调整手术计划变得困难。从术前体积扫描生成逼真的超

声图像有助于通过改善不同模态之间的空间对齐来克服这些挑战，并支持更

有效的手术引导。

为此，我们提出了DiffUS，一种基于物理的可微超声渲染器，它通过

耦合反射-透射方程模拟声波传播。与依赖随机采样的先前超声仿真方法不

同[7]，我们的方法使用确定性的光线传播和顺序处理来捕捉时间回波特征。

2N.Bertramoetal.

此外，我们的方式将波传播公式化为一个稳定的线性系统解决方案，从而能

够高效地计算多个内部反射，比现有方法更快[19]。我们的渲染器的可微性

质促进了梯度优化在各种下游应用中的使用，包括配准和重建任务。

我们的工作为基于物理的医学成像模拟领域做出了贡献，通过提供一个

可解释且计算效率高的超声合成框架[2,8,12]。DiffUS快速生成逼真的超声

图像，最终目标是通过增强多模式影像整合来支持改善手术结果。

2方法

DiffUS是一个可微分的基于物