Clear Sky Science · zh

基于改进扩散模型的医学体数据 CT 到 MRI 转换

· 返回目录

为什么将一种扫描转换为另一种很重要

医院通常依赖多种医学成像来观察体内情况。CT 扫描速度快且擅长显示骨骼,而 MRI 虽然耗时更长,但能更清晰地揭示大脑和器官等软组织的细节。两者同时获取既昂贵又耗时,有时对患者也存在风险。该研究探讨计算机是否能学会将三维 CT 扫描转换为类似 MRI 的扫描,使医生在只有 CT 数据时也能获得 MRI 风格的视图。

Figure 1. 将三维 CT 扫描转换为类似 MRI 的视图,以在无需额外扫描的情况下显示软组织
Figure 1. 将三维 CT 扫描转换为类似 MRI 的视图,以在无需额外扫描的情况下显示软组织

不同扫描呈现不同信息

每种医学成像方法突出的身体特征不同。CT 在检测骨折、出血和肺部问题方面表现出色,而 MRI 更适合检查大脑、脊柱、关节及许多内脏器官。理想情况下,每位患者都会接受所有必要的检查,但 MRI 设备昂贵且常常缺乏,可长时间的扫描也会延误急救治疗。能够直接从现有 CT 数据生成类似 MRI 的图像,可以在紧急情况下或设备有限的医院为医生快速提供额外信息。

从噪声模式到清晰图像

研究者关注的是完整的三维体积而非单张图像。这很重要,因为医学扫描由一叠切片组成,其空间关系对手术计划和肿瘤追踪至关重要。转换整个体积比转换单张图片更困难,因为数据量更大,且计算机必须在多张切片间保持细节对齐。团队基于一种称为扩散模型的现代生成模型类别,该模型通过逐步去噪将随机噪声变为逼真图像。他们改进了这一思路,使模型从噪声开始,在患者的 CT 扫描引导下逐渐生成类似 MRI 的体积。

适用于 3D 医学数据的智能模块

为使扩散模型在大型医学体积上表现良好,作者设计了一种名为增强 DDPM 的专用网络。它使用两个关键模块。第一个是变换模块,将信息流分为两条路径以同时捕捉细节和整体形状,从而有助于保留微妙结构。第二个是“无自注意力记忆模块”,使模型能够连接体积中远处的部分以保持解剖一致性,同时采用池化和上采样等技巧以在常用显卡上控制内存使用。模型生成类似 MRI 的体积后,定制的后处理步骤会进行全局归一化和自动对比度增强,使结构和潜在病变更清晰,并便于在患者之间公平比较。

Figure 2. 逐步去噪过程,将受 CT 引导的噪声体积转换为清晰的类似 MRI 结构
Figure 2. 逐步去噪过程,将受 CT 引导的噪声体积转换为清晰的类似 MRI 结构

在真实脑部和骨盆扫描上的测试

团队在一组公开的成对 CT 与 MRI 体积数据上训练和测试他们的方法,这些数据来自接受脑部或骨盆放射治疗的患者。真实临床数据在不同模态之间很少完全对齐,因此有些切片在 CT 与 MRI 间并不精确匹配。尽管约有 6% 的切片配对不完美,该方法仍然学会生成逼真的类似 MRI 体积。作者将其结果与几种基于生成对抗网络和标准扩散模型的先进技术进行了比较。使用更能反映人类视觉判断的质量度量,例如结构相似性和基于特征的分数,他们的方法在脑部和骨盆区域均持续生成更接近真实 MRI 扫描的图像。

这对未来患者护理的意义

研究表明,基于先进扩散模型的方法可以将三维 CT 扫描转换为更接近真实 MRI 数据的类似 MRI 体积,优于若干现有方法。这有望在 MRI 不可用或过于耗时时(例如急诊室或设备有限的诊所)帮助医生获得软组织视图。但作者也提醒,这些合成图像仍可能包含伪影,不宜替代真实 MRI 用于诊断。相反,它们可能成为规划与分诊的有用辅助工具,尤其是在进一步研究提高可靠性、加速计算并在更多 MRI 类型与更广泛的患者群体中验证性能之后。

引用: Ma, J., Chen, J. & Liang, A. CT-to-MRI translation of medical volume data based on an enhanced diffusion model. Sci Rep 16, 14774 (2026). https://doi.org/10.1038/s41598-026-45181-1

关键词: CT 到 MRI 转换, 医学图像合成, 扩散模型, 体积成像, 放射治疗规划