收藏 分销(赏)

MRI图像降噪技术综述.pdf

上传人:自信****多点 文档编号:547032 上传时间:2023-11-27 格式:PDF 页数:10 大小:1.26MB
下载 相关 举报
MRI图像降噪技术综述.pdf_第1页
第1页 / 共10页
MRI图像降噪技术综述.pdf_第2页
第2页 / 共10页
MRI图像降噪技术综述.pdf_第3页
第3页 / 共10页
亲,该文档总共10页,到这儿已超出免费预览范围,如果喜欢就下载吧!
资源描述

1、 计算机工程与应用 MRI 图像降噪技术综述蒲晓蓉1*,陈佳俊2,高励3,赵越1,罗纪翔1,刘军池1,任亚洲1(1.电子科技大学计算机科学与工程学院成都611731;2.电子科技大学格拉斯哥学院成都611731;3.成都市第三人民医院神经内科成都610031)【摘要】核磁共振成像技术已广泛用于脑部、脊髓和心脏等相关疾病的临床诊断。然而,由采样时间、环境、设备质量等多种因素导致的成像噪声制约着诊断精度的进一步提高。综合研究了 MRI 降噪技术的发展脉络,系统梳理了基于滤波、变换、统计等传统 MRI 图像降噪方法,并重点分析了当前基于深度学习的 MRI 图像降噪系列新方法,展望了 MRI 图像降噪

2、的未来发展趋势。最后,总结了现有医学图像质量评估方法,并指出针对依赖大量数据和人工标注医学图像样本、而可解释性较差的现有深度学习方法,需要探索性研究面向临床实际任务的医学图像质量评估新方法。关键词深度学习;核磁共振;医学图像质量评估;MRI 图像降噪中图分类号TN415文献标志码Adoi:10.12178/1001-0548.2022248SurveyonMagneticResonanceImageDenoisingPUXiaorong1*,CHENJiajun2,GAOLi3,ZHAOYue1,LUOJixiang1,LIUJunchi1,andRENYazhou1(1.SchoolofCo

3、mputerScienceandEngineering,UniversityofElectronicScienceandTechnologyofChinaChengdu611731;2.GlasgowCollege,UniversityofElectronicScienceandTechnologyofChinaChengdu611731;3.DepartmentofNeurology,TheThirdPeoplesHospitalofChengduChengdu610031)AbstractMagneticResonanceImaging(MRI)hasbeenextensivelyempl

4、oyedasanauxiliarymeanstodiagnosepathologicaldeteriorationofbrain,spinalcordandheartrelateddiseasesclinically.Nevertheless,imagingnoiseinducedbybothinternalandexternalimpactsrestrictfurtherimprovementondiagnosticaccuracy.Thispapercarriesoutareviewontechnologicalinnovationsrangingfromearlierconvention

5、alapproachesbasedonfiltertechniqueostate-of-the-artalternativesutilizingthedeeplearningnetwork.Finally,someinductivesummariesofthemedicalimagequalityassessmentshavebeenintroduced.Italsopointsoutthatexistingdeeplearningmethods,whichrelyonalargeamountofdataandmanualannotationofmedicalimagesamples,arep

6、oorlyinterpretable.Itisvitalthatclinical-orientedevaluationmechanismshouldbeexploredforclinicaldemands.Key words deep learning;magnetic resonance imaging;medical image quality assessment;MRIimagedenoising医学影像诊断已经成为临床医学诊疗的一种常见手段之一。磁共振成像(magneticresonanceimaging,MRI)是一种以非入侵方式取得活组织的病理及其生理改变信息的成像技术1。MRI

7、 具备多功能性、高诊断实用性和灵活性等技术优势,广泛应用于测量组织扩散、组织温度、心脏成像、脑部成像等许多临床任务。对于人体的非骨性部位以及软组织结构,MRI 可以形成更清晰的影像。与使用常规 X 射线的 CT 成像相比,MRI 不存在电离辐射影响,对大脑、脊髓、神经、肌肉、韧带、肌腱等部位的成像效果更佳。实际应用中,MRI 利用电磁场和核自旋相关性,通过检测处于强磁场中由谐振磁激励脉冲激发的氢原子产生的信号,绘制成像目标内部特定原子核和质子的空间位置和相关属性2。在单通道信号采集中,因为需要频繁计算原数据的离散傅里叶逆变换来构建影像,采集速度相比其他医学影像诊断方式更慢3。最近发展成熟的平行

8、成像技术通过减少 K 空间(傅里叶转换下的对偶空间)线数量,一定程度上缓解了成像较慢的不足。尽管设备硬件的不断升级有助于提高 MRI收稿日期:20220720;修回日期:20220830作者简介:蒲晓蓉(1969),女,教授,主要从事机器学习、信息医学等方面的研究.*通信作者:蒲晓蓉,E-mail:第52卷第4期电子科技大学学报Vol.52No.42023 年 7 月JournalofUniversityofElectronicScienceandTechnologyofChinaJul.2023成像的分辨率、信噪比和采集速度,但在采集过程中仍不可避免地会产生噪声和伪影4。成像过程中系统所处的

9、环境、涡流、成像物体内部随机的生理活动等复杂因素会产生随机的结构化时间噪声,相邻组织间的磁化率的不同、刚体运动和非刚体运动则会引入伪影5-6,扫描物体的热噪声属于影响成像的主要噪声源7。这些噪声和伪影会不同程度地影响生成图像的质量,降低计算机辅助影像诊断的精度以及临床影像诊断的准确率。现有绝大多数研究将 MRI 图像的噪声假设为加性高斯白噪声、泊松噪声或两者混合噪声,基于莱斯分布或瑞利分布进行影像重建8-10。这类假设的噪声与临床应用的实际场景存在明显差距。此外,现有医学图像的质量也缺乏规范、公认的评价机制,大多采用自然图像降噪评价指标,即峰值信噪比(peaksignaltonoiserati

10、o,PSNR)、结构相似度(structuralsimilarity,SSIM)等。事实上,临床医学影像诊断更关注病灶的位置、大小、密度、形态等关键特征,自然图像降噪的评价标准无法满足临床需求。因此,面向临床实际需求的医学图像质量优化方法和评价机制也是重要的研究课题。本文系统性分析了传统 MRI 图像降噪技术,着重梳理了基于深度学习的医学图像降噪方法。并总结了现有医学图像质量评估方法,指出现有深度学习方法严重依赖大量数据和人工标注医学图像样本,但可解释性较差,需要探索性研究面向临床实际任务的医学图像质量评估新方法。1MRI 图像降噪研究现状MRI 图像降噪一般分为前处理和后处理两种方法,其中前

11、处理方法需要在成像过程中多次获取相关数据并计算其平均结果,该方法会显著增加MRI 采集数据的时间,影响 MRI 技术的临床应用。后处理方法基于图像成像以后对 MRI 图像进行降噪。MRI 图像降噪的目标是保持组织边界的同时,在均匀的组织区域中获得分段恒定或缓慢变化信号。MRI 图像降噪的诸多研究成果提出了多种降噪技术,每种技术都有其自己的假设和优缺点。近年来,得益于神经网络方法在计算机视觉领域的深入应用,基于深度学习的降噪逐渐成为MRI 降噪的主流方法。1.1传统 MRI 图像降噪方法传统 MRI 图像降噪一般基于信号后处理进行降噪,主要包含:基于滤波、变换、统计和混合方法的 MRI 图像降噪

12、等。1.1.1基于滤波的 MRI 图像降噪1985 年,文献 11 提出用于降低 MRI 中高斯噪声的空间域滤波和时间域滤波算法。其中空间滤波方法将图像与选定的滤波器进行卷积计算,以降低图像的方差,但会使图像变得相对平滑,导致图像边缘模糊。而时域滤波需要根据采样的间隔来选择相应的滤波器,其应用场景较为局限。文献 12 提出的各向异性扩散滤波器克服了基于空间滤波器方法的不足,能有效去除同质化区域中的噪声并锐化图像边缘,与空间滤波相比能显著提升图像的质量。该滤波器为后来的研究奠定了基础,其后相继出现了很多基于各向异性扩散滤波器的改进方案,其中包括文献 13 提出的基于四阶复扩散的 MRI 图像降噪

13、方法,将标准扩散方程与自由薛定谔方程进行结合。文献 14 提出的非局部均值(non-localmeans,NLM)滤波器,是对传统邻域滤波方法的一种改进,利用了图像中存在的自相似特性,可以在对MRI 图像降噪的同时尽量保持其中的细节。现在比较流行的空域降噪算法大都基于 NLM 发展而来,近几年的 MRI 图像降噪传统方法均有使用15。1.1.2基于变换的 MRI 图像降噪基于变换域方法的目的是将原始信号转换为可以更轻松地消除噪声的模式。小波变换16将信号分解为多个尺度,涵盖图像的频谱信息和空间信息。该方法近二十年来在 MRI 降噪领域获得了广泛的关注,先后出现了大量的相关研究成果17。然而,基

14、于小波变换的降噪方法不适合处理具有高维奇异点的信号,故出现了 Curvelet 变换18。Curvelet 具有方向性和各向异性,可以表示图像边缘的方向,能同时获得对图像平滑区域和边缘部分的稀疏表达19。随后出现了基于 Contourlet 变换进行 MRI 图像降噪的方法20,使用 Contourlet 变换时,图像中的随机噪声与图像内容的系数可以获得更好的分离,通过选取合适的阈值,使用较简单的 Contourlet 变换就能达到较好的降噪效果。1.1.3基于统计方法的 MRI 图像降噪基于统计的 MRI 图像降噪方法,首先估计MRI 图像中的噪声,并获得统计上的最优降噪图像。不同的统计估计

15、方法会产生不同的降噪效果。1)极大似然估计法。文献 21 使用极大似然估计法对信号进行重建。文献 22 提出应用于多线圈 MRI 图像的非局部极大似然估计方法。第 4 期蒲晓蓉,等:MRI 图像降噪技术综述5692)线性最小均方误差估计。文献 23 利用图像局部统计量的分布信息,进行 MRI 图像降噪。3)相位误差估计。文献 24 提出一种相位误差估计方法,迭代地应用了一系列非线性滤波器,每个滤波器都用于修改估计,直到输出收敛到一个稳定的估计。4)非参数估计。文献 25 提出一种使用非参数密度估计的 MRI 图像降噪算法。使用输入数据进行噪声估计,不需要显式的参数调整。1.1.4混合方法的 M

16、RI 图像降噪1)独立成分分析法 ICA(independentcomponentanalysis)。这里的 ICA 是指基于假设信号源的统计独立性的一系列盲信号分离技术,用于 MRI 多维数据的计算26。进行图像降噪时,ICA 能容忍被测物体对外界的非预期反应,针对时间和空间高分辨率的功能性 FMRI(functionalMRI)数据,对随机信号和某些复合信号(如脉动和呼吸造成的伪影)的降噪及分离具有显著效果27。此外,ICA 降噪对图像的边缘也有一定的增强作用,且可以选择性地分离和抑制全局结构化噪声(如由受试者呼吸产生的血流调节引起),同时保留基于任务和静息状态的功能性 MRI 的全局神经

17、信息27-28,为是否进行全局信号回归难题提供潜在的解决路径。然而,该方法严重依赖投影数据,受限于降噪性能和算法复杂度,缺乏较好的普适性29。2)随机方法(stochasticmethod)。该类方法通过估计和计算抑制前噪声图像的噪声特性及其方差特性进行图像降噪,其本质是随机的,因此适用于现实随机噪声分布的处理和降噪。有多种不同的估计器(estimator),如最大似然估计 ML(maximumlikelihood)3031、期望最大化估计 EM(exceptionalmaximum)32、线性最小均方误差估计 LMMS(linearminimummeansquare)33等,分别适用于不同的

18、应用场景。然而,计算复杂、迭代过程缓慢、参数估计易于陷入局部最优等缺陷34,限制了其进一步发展和应用。图 1 描述了 MRI 图像降噪的传统方法分类。传统方法基于变换的方法基于统计方法小波转换曲波转换轮廓波转换非参数估计相位误差估计线性最小均方误差估计最大似然估计空间域滤波器时间域滤波器各向异性扩散滤波器非局部均值滤波器随机方法独立成分分析法基于滤波器混合方法图1传统 MRI 降噪方法分类1.2基于深度学习的 MRI 图像降噪方法尽管有一些传统 MRI 图像降噪方法的降噪性能较好,但仍存在诸多不足。如计算量大、复杂度高、非凸优化问题以及参数选择难度大等。这些缺点严重制约了传统 MRI 降噪方法

19、的临床实际应用。基于深度学习的 MRI 图像降噪可以避免传统MRI 降噪方法对物理过程的建模,极大降低对预设模型的依赖。基于深度学习的 MRI 图像降噪最初使用简单的卷积神经网络模型,随着深度学习技术的发展,逐渐使用更复杂多样化的网络模型,如生成式对抗网络,甚至无监督方法进行 MRI 图像降噪。1.2.1基于卷积神经网络的 MRI 图像降噪卷积神经网络(convolutionalneuralnetworks,CNN)在深度学习领域已获得越来越广泛的应用。该方法通过训练不同的网络架构与带噪声或无噪声的样本进行 MRI 图像降噪,试图从带噪声的输入中推断出干净图像。经典 CNN 降噪网络模型如图

20、2 所示。然而,绝对无噪声的图像是无法获取的。因此,模型训练的数据集主要源于模拟无噪声图像和多次采集的平均后的低噪图像35。570电子科技大学学报第52卷带噪图像噪声图像非线性映射Conv+AFConv+BN+AFConv+BN+AFConv+BN+AFConv图2经典 CNN 降噪网络模型2017 年,文献 36 利用降噪卷积神经网络(denoisingCNNs,DnCNN)消除高斯噪声,并利用残差学习策略取得了优异性能。同年,文献 37 也将 CNN 用于伪影处理。2018 年,文献 38 基于固定噪声参数训练多通道 CNN 网络,并将训练好的网络运用于一般噪声水平的图像处理,取得了较好的

21、效果。文献 35基于两种类型的训练集,结合ADAM 优化器、残差学习的优化思路将 3DCNN运用于 MRI 图像降噪,对高斯噪声的抑制性能优于当时最新的传统降噪方法。不同于常规的数据预处理,该方法运用低通滤波后的局部平均图与相同的斑块大小的局部标准差图来估计局部标准差图。通过减去局部均值并除以局部标准差,对输入和输出体积进行归一化处理,减小了传统数据预处理引起的块状伪影的影响。CNN 网络的结构可分为:1)输入层,由大小为 121212 的三维卷积和具有64 个 333 体素滤波器的 RELU 激活函数组成。2)权重层,每层由一个批量标准化 RELU 激活函数和 3D 卷积核构成。3)输出层,

22、由批量标准化和三维卷积组成,生成一个 121212的输出补丁,以均方误差(meansquarederror,MSE)为损失函数。2019 年,文献 39 将 CNN 与传统滤波器结合进行降噪,为图像处理提供了新思路。早期所用的 CNN 架构比较基础,训练好的网络只能针对一个部位图像进行处理,且降噪思路相对简单,易于造成过度平滑,且丢失一些精密细节。深度学习模型大多采用均方误差 MSE 作为损失函数,能获得较理想的降噪后图像的峰值信噪比 PSNR,但易于使降噪后图像过度平滑。2019年,文献 40 提出 3Dwideresidualnetwork(3D-WRN-VGG)感知损失卷积神经网络,摒弃

23、了此前常用的多通道策略,通过 3 张图像构建三维数据,获取更多上下文信息对一张图像进行降噪,极大降低了所需网络的层数和深度,避免因网络层数过深丢失精密细节,同时确保获取高级特征。引入提前训练好的感受损失计算网络(VGG-16)取代此前常用的损失函数,在特征空间中将降噪结果的感知特征与原图像的感知特征进行比较,可以显著提升降噪效果,避免过度平滑和细节损失问题。该网络主要由两部分组成:1)CNN 降噪网络。该网络包含5 个卷积层,前 4 个卷积层分别使用 128 个 77 的3D 卷积核和 ReLU 激活函数,并用一个三维 77的卷积核作为输出层。该网络能减弱数据间的相关性(数据白化),避免内部协

24、变量偏移,提高训练效率。2)感知损失计算器。利用一个预训练好的VGG(visualgeometrygroup)网络41作为感知损失计算器,将降噪结果和干净图像输入 VGG 网络,计算感知损失,并将重建损失反向传播给 CNN 降噪网络,更新 CNN 的权重(VGG 网络的权重不变)。实验表明,虽然 PSRN 值相较于当时先进的技术并不总是最优(10dB 和 15dB 噪声,略低于ODCT3D),但能极大地保留图像的细节和纹理特征,具备显著的降噪性能。文献 42 结合自编码器(autoencoder,AE)和残差网络,提出 CNN-DMRI(CNNfordenoisingofMRI)图像降噪网络。

25、其中,自编码器 AE 旨在将分析数据降维,学习到高级的抽象特征且摒弃冗余的非必要特征。作为一种自监督学习模式,编码器结构增强了该网络对图像精密结构特征的提取能力。CNN-DMRI在上下采样间增加了局部残差模块,并在对应的卷积层和反卷积层之间添加了残差连接,提高了学习效率。局部残差学习与全局残差学习相结合,减小了中间层的潜在特征损失。CNN-DMRI 的网络架构主要划分为 3 类:1)输入的 2 个卷积层和 1 个输出的卷积层;2)编码器解码器结构,2 个由 128 个滤波器组成的下采样模块和2 个由 64 个滤波器组成的上采样模块;3)由中间4 个残差学习模块组成的局部残差学习网络和首位卷积层

26、的残差连接。尽管后续呈现出更多的改进方法,但 CNN-DMRI 在 MRI 图像降噪方面具有突出的地位。2021 年,文献 43 提出了三维并行周期神经网络(3D-parallel-riciannetnetwork),该网络是一种残差学习的监督学习网络,通过提取局部和全局特征,进一步提高 CNN 网络对 MRI 图像降噪的性能(同时实现噪音抑制和图像结构的保护)。该网络主要包括:1)扩张卷积残差网络 DCRNet(dilatedconvolutionresidualnet)。该模块增加了其后网络层的感知野,避免全局特征丢失。接受场的扩展可以提高 CNN 用于图像分类的性能44;2)深度可分离卷

27、积残差网络 DSCRNet(depthwiseseparableconvo-lutionresidual)。该模块提取更多的局部信息,降低第 4 期蒲晓蓉,等:MRI 图像降噪技术综述571计算复杂度;3)重建网络 RECNet(reconstructionNet)。该网络基于从级联的 DCRNet 和 DSCRNet网络协同提取局部和全局特征(先验信息),将原图减去网络生成的噪声,以重建干净的 MRI 图像。相较于渐进的 RicianNet45(该网络分别提取噪声的像素级和特征级强度),该网络能学习图像的信道和位置信息,极大地降低了参数量,提高了训练降噪模型的效率并降低了复杂性。对比简单 C

28、NN 的运用,该网络具备更优的局部降噪性能,在临床真实数据的测试中有较优异的表现。1.2.2基于生成对抗网络 GAN 的 MRI 图像降噪2019年,文献46 提出一种基于WGAN(wasser-steingenerativeadversarialnetworks)47框架的 MRI降 噪 方 法 RED-WGAN(residual encoder-decoderWGAN),结合残差学习中的跳跃连接和自编码器,以WGAN作为生成器,使用感知损失保持结构并降噪。该方法通过计算预训练VGG-19网络在特征空间中的距离来衡量感知损失,并将其与MSE结合,构造新的损失函数,缓解了由于MSE导致的过渡平

29、滑。文献 48 也使用了WGAN框架,将L1范式与感知损失组合作为损失函数。该方法还使用DnCNN 作为生成器网络,运用其中的残差,使WGAN框架对噪声图像而非干净图像进行生成与判别。2021 年,文献49 将GAN用于MRI图像降噪,不同于RED-WGAN,该方法使用条件GAN50作为主体框架,将自动编码器作为生成器,并使用了马尔可夫判别器51。该模型在不同噪声水平下取得了相较于以往模型更稳定的降噪性能。1.2.3基于半监督/无监督的 MRI 图像降噪文献 52 提出了使用半监督学习,实现联合MRI图像重建与降噪任务框架 Noise2Recon。该框架可以缓解数据稀缺导致的过拟合问题,能增强

30、对噪声采集的鲁棒性。该方法基于监督学习实现MRI 图像从欠采样到完全采样的重建,使用无监督学习完成MRI 图像降噪,并分别对重建和降噪任务建模,构造了两个任务的联合学习模型(数学形式上表现为加权和)。通过使用现有网络模型验证,将两个任务联合起来可能无法在单独领域中取得最好的性能,但是在最终的图像表现上可以获得优于两个单独模型分别完成重建与降噪任务的结果。文献 53 使用无监督学习的 MRI 图像降噪方法,提 出 GAN-URGAN(graph attention networkbasedend-to-endUnsuperviseddeepresidualgenera-tiveadversari

31、alnetwork)。其主要目的在于解决医学图像缺乏真实成对数据集的问题。该模型受到Unet54、GAN55以及图注意力网络GAT56的启发。生成器网络主体结构使用Unet,使用残差和注意力模块获取非局部信息,使用图注意力层获取一组切片中的全局信息,使用注意力连接改善ROI表现。为了处理未配对的训练数据,利用深度网络先验知识,结合双重对抗损失(图像内容的信息熵损失与交叉熵损失)来抑制噪声的产生。文献 57 提出了用于 CT 和 MRI 图像降噪的无监督学习框架,结合字典学习与残差学习构建无监督的降噪模型。字典学习提供输入 MRI/CT图像patch的有效表示,通过信息的稀疏表示估计噪声;残差学

32、习直接对patch中的噪声进行学习。然后将两个分支学习到的噪声再进行像素级融合,并传递给字典学习分支,以更新字典。图 3 描述了 2017 年以来 MRI 深度学习降噪主流技术出现的时间节点。监督学习图神经网络扩张卷积噪声学习多通道降噪字典学习CNNGAN3D 卷积感知损失自编码器2017 年2018 年2019 年2020 年2021 年Transformer2022 年半监督学习/无监督学习图3MRI 图像降噪技术时间节点1.3MRI 图像降噪方法小结传统图像降噪方法已有部分获得优异的降噪性能,但因其计算量大,计算过程复杂,参数选择困难等不足,制约了其在临床领域的实际应用。表 1罗列了一些

33、主流传统降噪方法的优缺点。为了避免对预期算法和特定应用场景的建模,572电子科技大学学报第52卷方便临床医学图像降噪的实际需求,基于深度学习的降噪模型被提出。随着技术的不断更新,神经网络的降噪能力越来越优异。但由于真实医疗数据的隐私、敏感、保密等属性限制,能用于模型训练的真实临床数据较少,尤其缺乏模型训练所需的足够样本对。因此大多模型的训练和测试都是基于人工合成的噪声图像,与实际噪声还有一定差距。图 4 从技术热度及实际验证的角度,总结了20172022 年间,主流深度学习核心技术的发展趋势。表 1一些主流传统 MRI 降噪方法对比分类分类方法方法优势优势劣势劣势关键词关键词ICAICA提高边

34、缘锐度,保持图像质量计算复杂,需求无噪声样本独立非高斯数据基于频域转换基于频域转换低频图像降噪效果好只适用于低频数据,依赖阈值选择阈值化/附加噪声WT适用于非平稳数据消除平滑边缘处的信息,无法概括高维奇点的图像信息子带/均匀区域基于时间域转换CVT适用性广速度慢,对区域平滑的图像无效相空间划分/Ridgelet变换CNT图像轮廓和纹理提取能力强,适用多分辨率图像计算复杂,可能引入吉布斯伪影稀疏表示/定向分解平滑滤波器有效降低高频频谱的高斯噪声过度平滑,丢失细节信息减小方差时间滤波器适用于瞬时变化产生的噪声图像内容一并丢失自旋回波效应/物体运动滤波法各向异性扩散滤波器稳态解边缘区域的细节特征丢失

35、单一边界解非线性均值滤波器降噪后图像保持完好,避免平坦区域和边缘的信息丢失计算时间长灰度相似/空间相似/欧氏距离双边滤波器平滑灰度水平并保留边缘细节和像素,适用于智能医疗无法处理低光谱区域的噪声且依赖参数的设置光度相似特性/感知度量最大似然估计能去噪小数据样本,处理随机噪声 可能出现局部最优、偏倚的数据点随机/小样本期望最大化估计计算简单局部最优、收敛速度慢迭代学习随机方法线性最小均方误差估计复杂数据的处理效果优越受限于临近样本,噪声方差值容易异常,去噪效果不稳定局部信息贝叶斯估计不依赖参数的设置无法计算大量的MR数据马尔可夫随机相位误差估计有效保留边缘信息计算过程复杂非线性滤波无监督字典学习

36、Transformer图神经网络GAN可变卷积自编码器残差模块(连接)注意力机制扩张卷积感知损失3D 卷积多通道噪声学习CNN2017201820192020论文发表时间/年新型技术已验证已大量验证仍需验证存在更优方法关键技术20212022图4基于深度学习的 MRI 图像降噪方法演进从单一 CNN 模型到结合字典学习和残差学习的无监督学习模型,大多数模型都旨在数据有限的情况下,尽可能捕捉图像的细节,确保降噪效果并避免细节丢失,从而优化 MRI 图像的降噪性能。其中部分技术已相对成熟且被验证,而部分技术如 transformer 和可变卷积则相对较新颖。由于MRI 图像数据采集时间较长,且成对

37、数据获取难度较大,基于半监督或无监督学习方式进行图像降噪或将成为未来的发展方向。2医学图像质量评价现有医学图像质量评价大多沿袭自然图像质量的评价机制。然而,医学诊断更注重病灶的细节,如结构、大小和密度变化等关键特征,医学图像质量评价更复杂、特殊。所以,提出更具有临床意义的图像质量客观评价指标极具有挑战性58。2.1通用评价指标与自然图像质量评价方式一样,现有医学图像质量的客观评价方式主要基于峰值信噪比 PSNR 和结构相似度 SSIM 两种指标。对于 MRI 图像降噪,采用峰值信噪比进行评估时,PSNR 可以定义为:第 4 期蒲晓蓉,等:MRI 图像降噪技术综述573PSNR=10lgX2MA

38、X/MSE(1)式中,XMAX是信号最大值;MSE 为均方误差,广泛用于评估恢复图像的质量。PSNR 值越高,降噪性能越好59。SSIM 评价方法将失真建模为亮度、对比度和结构 3 个不同因素的组合。其中,用均值作为亮度估计、标准差作为对比度估计、协方差作为结构相似程度的度量。SSIM 用于判断参考图像和降噪图像之间的相似性,其值在 0,1 范围内,值越高,表示图像相似度越高60。此外,还有一些客观评价指标用于图像质量的评价,如规范化绝对误差(normalizedabsoluteerror,NAE)、最大差异(maximumdifference,MD)、结构化内容(structuralcont

39、ent,SC)、最大差异归一化互相关(normalizedcrosscorrelation,NCC)61、相对对比度(relativecontrast,RC)62等。这些指标在一定程度上能体现图像的降噪性能和恢复状态,但面对临床实际应用时,却无法准确描述降噪对图像纹理细节的保持度。如 SSIM 定义的图像“结构信息”过于笼统,忽略了同一图像中不同区域具有不同视觉重要性这一特点。因此,除了上述评价指标外,同时还依赖视觉评估40和人工质量评估63。另外,也有将 SSIM 与图像的其他特征相结合来获得混合评价指标。如基于梯度方向的图像质量评价方法64和基于改进的 SSIM 信息的质量评价方法65等。

40、然而,现有医学图像质量评价指标无法满足临床的实际应用,因为图像特征或单一数值计算都无法有效反映临床诊断中的实际信息需求。因此,针对临床实际应用的医学图像质量评价机制值得进一步深入研究。2.2MRI 图像质量评价指标现有医学图像质量评估方法主要包括主观评估和客观评价两种指标。主观评估指放射科医生按照专门影像诊断标准来判断医学图像质量。客观评估指通过模仿人类视觉系统(humanvisualsystem,HVS),制定一系列适合计算机处理的评估指标。主观评估方法严重依赖人工经验,不稳定、耗时费力,但客观指标又很难全面反映真实情况。因此,基于深度学习的医学图像质量评估方法受到越来越多的关注。2019

41、年,文献 66 提出一种多阶段的 MRI 图像质量评估方法。该方法主要分为 3 个阶段:1)利用全局残差网络的切片级质量评估;2)利用聚集同一体素的不同切片提取的特征进行体素级质量评估;3)一个对象所有体素的评估结果,进行对象级评估。然而,MRI 图像质量标签大多针对单一体素,这对于高低质量均包含的混合切片是不精确的。为此,文献 67 提出对标记误差和标记数量小且有较高鲁棒性的评估方法。该方法应用迭代式自训练机制,在训练过程中重新调整不可靠的标签,以提高训练效果。基于深度学习的方法在样本量较小时易于出现过拟合现象。2021 年,文献 68 提出了一种基于残差的卷积网络。为了针对性评估关键部位的

42、图像质量,该方法需要对图像进行预处理,将图像转换为灰度图像,以增加纹理信息、减弱冗余特征对图像质量的影响。结合主观评估,对比了方法的相关性与误差,证明了有效性。由于深度学习基于数据驱动,而大量带标签的医学图像难以获取,这限制了图像质量评估的准确性。此外,基于深度学习的图像降噪方法的可解释性较差。因此,需要更多相关研究用于解决临床实际任务69。3结论与展望本文系统性分析了 MRI 图像降噪的主流方法,重点分析了基于深度学习的 MRI 图像降噪方法。论文指出,MRI 图像降噪应该立足临床实际需求,紧密结合病灶分割、自动标注和识别等下游任务,将医学临床先验知识融入 MRI 图像降噪过程,实现多任务并

43、行优化。此外,MRI 图像质量与扫描成像环境、时间等因素紧密相连,需要深入研究加快采样速率或重建欠采样图像,以提高图像质量的优化方法。性能优异的降噪方法有助于进一步降低采样时间,最大限度地提高医疗诊断效率。最后,还需要深入研究符合临床实际需求的医学图像质量评价新机制,包括人工主观盲评的科学量化、人工评价与客观指标的有机结合等,以期获得面向临床实际应用、可解释性强的图像质量评价机制。参考文献1WRIGHTG.MagneticresonanceimagingJ.IEEESignalProcessMag,1997,14(1):56-66.2RODRIGUEZ A O.Principles of ma

44、gnetic resonanceimagingJ.RevMexFis,2004,50:272-286.574电子科技大学学报第52卷3GUDBJARTSSONH,PATZS.TheRiciandistributionofnoisyMRIdataJ.MagnResMed,1995,34(6):910-914.4MOHANAJ,KRISHNAVENIV,GUOYA.Asurveyonthe magnetic resonance image denoising methodsJ.BioSigPro,2014,9:56-69.5REDPATH T W.Commentary signal-to-nois

45、e ratio inMRIJ.BrJRadiol,1998,71(847):704-707.6ZHUH,LIY,IBRAHIMJB,etal.RegressionmodelsforidentifyingnoisesourcesinmagneticresonanceimagingJ.AmStatAssoc,2009,104(486):623-637.7MACOVSKIA.NoiseinMRIJ.MagnResonMed,1996,36(3):494-497.8HENKELMANRM.MeasurementofsignalintensitiesinthepresenceofnoiseinMRima

46、gesJ.MedPhys,1985,12(2):232-233.9DIETRICH O,RAYA J G,REEDER S B,et al.Measurement of signal-to-noise ratios in MR images:Inflfluence of multichannel coils,parallel imaging,andreconstructionfifiltersJ.MagnResonImaging,2007,26:375-385.10DIETRICHO,RAYAJ,REEDERSB,etal.Inflfluenceofmultichannelcombinatio

47、n,parallelimagingandotherreconstructiontechniquesonMRInoisecharacteristicsJ.MagnResonImaging,2008,26:754-762.11MCVEIGHE,HENKELMANR,BRONSKILLM.NoiseandfiltrationinmagneticresonanceimagingJ.MedicalPhysics,1985,12(5):586-591.12PERONAP,MALIKJ.Scale-Spaceandedgedetectionusing anisotropic diffusionJ.IEEE

48、Transactions onPatternAnalysisAndMachineIntelligence,1990,12(7):629-639.13RAJANJ,JEURISSENB,SIJBERSJ,etal.Denoisingmagnetic resonance images using fourth order complexdiffusionC/The13thInternationalMachineVisionandImage Processing Conference.Dublin Ireland:IEEE,2009:123-127.14BUADESA,COLLB,MORELJM.A

49、reviewofimagedenoising algorithms,with a new oneJ.MultiscaleModeling&Simulation,2005,4(2):490-530.15YU H,DING M,ZHANG X.Laplacian eigenmapsnetwork-based nonlocal means method for MR imagedenoisingJ.Sensors,2019,19(13):2918.16WEAVERJB,XUY,JRHEALYD,etal.Filteringnoisefrom images with wavelet transform

50、sJ.MagneticResonanceinMedicine,1991,21(2):288-295.17LUISIER F,BLU T,WOLFE P J.A cure for noisymagnetic resonance images:Chi-Square unbiased riskestimationJ.IEEE Transactions on Image Processing,2012,21(8):3454-3466.18DOMN,VETTERLIM.Thecontourlettransform:Anefficient directional multiresolution image

展开阅读全文
相似文档                                   自信AI助手自信AI助手
猜你喜欢                                   自信AI导航自信AI导航
搜索标签

当前位置:首页 > 学术论文 > 论文指导/设计

移动网页_全站_页脚广告1

关于我们      便捷服务       自信AI       AI导航        获赠5币

©2010-2024 宁波自信网络信息技术有限公司  版权所有

客服电话:4008-655-100  投诉/维权电话:4009-655-100

gongan.png浙公网安备33021202000488号   

icp.png浙ICP备2021020529号-1  |  浙B2-20240490  

关注我们 :gzh.png    weibo.png    LOFTER.png 

客服