ISSN 1004-4140
CN 11-3017/P

深度学习定量测量对新型冠状病毒感染预后的分析

赵建华, 梁丹艳, 吕高星, 闫昕, 刘宇, 王晓兰, 柴军

赵建华, 梁丹艳, 吕高星, 等. 深度学习定量测量对新型冠状病毒感染预后的分析[J]. CT理论与应用研究, 2023, 32(5): 587-594. DOI: 10.15953/j.ctta.2023.044.
引用本文: 赵建华, 梁丹艳, 吕高星, 等. 深度学习定量测量对新型冠状病毒感染预后的分析[J]. CT理论与应用研究, 2023, 32(5): 587-594. DOI: 10.15953/j.ctta.2023.044.
ZHAO J H, LIANG D Y, LYU G X, et al. Analysis of Prognosis of Coronavirus Disease 2019 Using Quantitative Measurement of Deep Learning[J]. CT Theory and Applications, 2023, 32(5): 587-594. DOI: 10.15953/j.ctta.2023.044. (in Chinese).
Citation: ZHAO J H, LIANG D Y, LYU G X, et al. Analysis of Prognosis of Coronavirus Disease 2019 Using Quantitative Measurement of Deep Learning[J]. CT Theory and Applications, 2023, 32(5): 587-594. DOI: 10.15953/j.ctta.2023.044. (in Chinese).

深度学习定量测量对新型冠状病毒感染预后的分析

基金项目: 内蒙古自治区人民医院院内基金项目(基于深度学习的病毒性肺炎不同临床转归胸部CT评价(2020YN08));包头医学院研究生教育教学改革项目(人工智能在放射影像学专业学位研究生教学中的初步应用(B-YJSJG202303));内蒙古医科大学2023年度高等教育教学改革研究项目(“人工智能+教学”模式在医学影像学专业教学中的应用探索(NYJXGG2023139));内蒙古自治区卫生健康科技计划项目(超高分辨率CT靶扫描技术联合低剂量对诊断亚实性肺结节的价值(202201015))
详细信息
    作者简介:

    赵建华: 男,内蒙古自治区人民医院影像医学科副主任医师,主要从事影像诊断工作,E-mail:zjh2822yyjh@163.com

    通讯作者:

    柴军: 男,内蒙古自治区人民医院影像医学科主任医师,主要从事影像诊断工作,E-mail:amaschai@126.com

  • 中图分类号: O  242;R  814;R  563.1

Analysis of Prognosis of Coronavirus Disease 2019 Using Quantitative Measurement of Deep Learning

  • 摘要: 目的:分析基于深度学习定量测量新型冠状病毒感染(COVID-19)患者胸部CT炎性病灶的特征,预警重症的发生,提高对COVID-19预后的认识。方法:回顾性分析477例首次确诊为中型COVID-19患者的胸部CT,男276例,女201例,根据是否转为重症(重型/危重型)分为A组(未转为重症)、B组(转为重症),比较两组病例病灶分布、累及肺叶侧别、数目等CT基本征象及基于深度学习的病灶体积、体积占比和密度等的差异。结果:477例COVID-19患者均有流行病学史,年龄、性别在两组间的差异无统计学意义。B组全肺及各肺叶病灶体积及体积占比高于A组。A组病灶以右肺下叶为主,占比高于其它肺叶,达3.32%;其次为左肺下叶,占比为2.08%;左肺上叶病灶体积占比较其他肺叶低,仅为0.25%。A组部分患者右肺上叶、右肺中叶及左肺上叶无病灶。B组病灶呈双肺分布,各肺叶均有;其中以右肺下叶、左肺下叶分布为主,占比最高,分别为57.86% 和54.76%;右肺中叶体积占比较其他肺叶低,为34.73%。各组病灶均以磨玻璃密度影为主。A组以密度为 -570~-470 HU病灶为主,占比达13.89%;其次为 -470~-370 HU,占比为11.07%;密度为30~70 HU实性病灶及密度为 -70~30 HU较少,占比仅3.22% 和4.75%。B组大部分呈磨玻璃密度影,以病灶密度为 -570~-470 HU、-470~-370 HU与 -370~-270 HU为主,占比分别为13.18%、12.58%、12.52%;密度为 -570~-470 HU的病灶占比与A组差异无统计学意义,余各密度病灶体积及体积占比高于A组,呈病灶密度越高,B组占比较A组越高的趋势。结论:感染病灶体积较大、实性成分较多及多种CT征象并存常提示肺部炎症较重,容易进展为重症,基于深度学习的胸部CT定量测量有助于评估COVID-19预后及预警重症。
    Abstract: Objective: To analyze the differences of chest computed tomography (CT) inflammatory lesions in patients with coronavirus disease 2019 (COVID-19), which were quantitatively measured based on deep learning, to warn the occurrence of severe cases and improve the understanding of the prognosis of COVID-19. Methods: The chest CT scans of 477 local patients with COVID-19 diagnosed for the first time at Inner Mongolia Autonomous Region People's Hospital were retrospectively analyzed. A total of 276 men and 201 women were divided into group A (not serious) and group B (serious) based on whether their diseases turned serious (severe/critical). Comparison was made between the two groups on the basic CT signs, such as lesion distribution, involved lobe side, number, differences in lesion volume, volume proportion, and density based on deep learning. Results: All 477 patients with COVID-19 had epidemiological history, and no statistical difference was noted in age and gender between the two groups. The volume and proportion of the lesions in the whole lung and each lobe of the lung in group B were higher than those in group A. The lesions in group A were mainly in the lower lobe of the right lung, accounting for 3.32% more than that in other lobes. The lower lobe of the left lung was the next, accounting for 2.08%. The volume of lesions in the upper lobe of the left lung was lower than that in other lobes, accounting for only 0.25%. No lesions were noted in the upper lobe of the right lung, middle lobe of the right lung, and upper lobe of the left lung in part of group A. In group B, the lesions were distributed in both lungs and in each lung lobe. The lower lobes of the right lung and left lung were predominant, accounting for 57.86% and 54.76%, respectively. The volume of the middle lobe of the right lung was 34.73% compared with the other lobes. The main lesions in each group were ground-glass density shadows, and the main lesions in group A were −570 ~ −470 HU density, accounting for 13.89%, followed by −470 ~ −370 HU, accounting for 11.07%. Only 3.22% and 4.75% of solid lesions with densities of 30 ~ 70 HU and −70 ~ 30 HU were found. Most of the lesions in group B were ground-glass density shadows, and the focal densities were mainly −570 ~ −470 HU, −470 ~ −370 HU, and −370 ~ −270 HU, accounting for 13.18%, 12.58%, and 12.52%, respectively. No statistical difference was noted between the proportion of lesions with a density of −570 ~ −470 HU and that of group A; however, the volume and proportion of other lesions with different densities were higher than those of group A, showing a trend that the higher the density of the lesions, the higher the proportion of group B was compared with group A. Conclusion: Larger infection volume, more lesion solid components, and multiple CT signs often indicate more severe lung inflammation, which easily progresses to severe disease. Quantitative measurement of chest CT based on deep learning is helpful for the prognosis assessment of COVID-19 and the early warning of severe outcome.
  • 研究表明,肿瘤内部的氧气浓度是一个重要的放疗参数,如果可以准确地显示出肿瘤内部的氧浓度图像,便可以根据肿瘤内氧浓度的分布来调整放射剂量,以实现精准放疗[1-2]。电子顺磁共振成像(electron paramagnetic resonance imaging,EPRI)是一种高精度高分辨率的肿瘤氧成像模态[3-5]。然而EPRI的主要缺点是扫描时间过长,因为每个角度下的投影信号需被重复采集数千次,以压制随机噪声。一种提高扫描速度的方法是减少在特定角度下采集投影信号的重复次数,然而如此采样导致投影信号的信噪比下降,进而使得用传统的三维滤波反投影(filtered back projection,FBP)算法重建出的EPRI图像噪声过大。因此图像去噪成为EPRI当前最重要的问题之一。

    图像重建中的去噪问题大致分为两类:基于优化的重建方法和基于深度学习的图像后处理方法。

    在基于优化的图像重建算法中,以总变差(total variation,TV)最小类算法最为典型。2006年至2008年,Sidky等[6-7]提出的TV最小化算法可以实现高精度稀疏重建和含噪投影重建。人们后来又提出若干改进的TV模型来提高重建精度,如自适应加权TV(adaptive-weighted TV,AwTV)模型[8]、高阶TV(high order TV,HOTV)模型[9-10]、非局部TV(non-local TV,NLTV)模型以及TpV(total p-variation)模型[11]等。迭代法重建精度高,但重建速度慢,尤其在三维重建中,重建速度成为影响其应用的主要障碍。

    基于深度学习的图像去噪方法,是当前性能最优的去噪方法。2008年,Jain等[12]首次通过训练卷积神经网络,实现端到端去噪映射;2016年,Mao等[13]提出的卷积编解器网络,采用了卷积和反卷积层之间的跳跃连接结构,大大提升模型的去噪性能;2017年,Zhang等[14]提出了一个深层(denoising convolutional neural network,DnCNN)网络模型,在网络中引入残差学习(residual learning)[15]、线性激活单元(rectified linear unit,ReLU)和批归一化(batch nonmalization,BN)[16]来训练网络;同年Chen等[17]将自编码器和残差连接用到了卷积-反卷积神经网络(residual encoder-decoder convolutional neural network,RED-CNN)中,以实现低剂量CT成像。

    随着网络的不断加深加宽,人们发现仅改变网络结构不能从本质上提升性能,而且真实环境下的噪声复杂多变,需设计性能更优的网络以实现图像去噪。Zhang等[18]在2018年先后提出了(fast and flexible denoising network,FFDNet)及(convolutional blind denoising network,CBDNet)用于真实图像去噪。FFDNet将不同的噪声水平和噪声图像作为输入,以应对复杂真实环境的噪声,而CBDNet网络通过子网络先实现噪声水平的估计,再通过改进的UNet网络[19]来获取潜在的干净图像,使整个网络获得了盲去噪能力[20]

    为进一步提高网络的盲去噪能力,Tian等[21]在2019年提出了一个双通道网络(batch-renormalization denoising network,BRDNet),将两个不同的互补网络结合BN、残差学习和空洞卷积[22]用于图像去噪,增强了卷积神经网络(convolutional neural network,CNN)对图像细节信息的表征能力。Zhao等[23]在2020年提出(pyramid real image denoising network,PRIDNet)网络,由噪声估计、多尺度特征提取和特征融合模块构成,大大提高了在真实噪声图像中网络的去噪性能,更多地提取了图像的潜在特征。

    上述网络中的CBDNet和PRIDNet通过估计噪声水平来提高网络的盲去噪能力,BRDNet是通过增加网络宽度来提取图像细节特征。受此启发,本文拟结合以上3种去噪网络的优势,构建多通道网络提取图像细节信息,多尺度实现特征信息的融合,多拼接实现盲去噪网络的结构完整性,基于此设计多通道、多尺度、多拼接卷积网络(multi-channel,multi-scale,multi-concatenation,convolutional network,3MNet)以实现EPRI图像去噪。

    CNN是深度学习的一类经典网络结构,其尤其适用于图像处理,可以学习到输入图像和输出图像之间复杂的、难以被数学建模的非线性映射。为实现EPRI快速成像,首先以快速扫描方式获得低信噪比的投影数据,然后使用FBP算法重建出含噪图像,最后通过CNN大规模训练数据实现图像去噪。CNN去噪的示意图如图1所示。

    图  1  CNN去噪示意图
    Figure  1.  CNN denoising schematic diagram

    3MNet网络结构如图2所示,所提议的网络包括3个子网络:图像预处理子网络、三通道卷积子网络和多尺度卷积子网络,输入的含噪EPRI图像经过3个子网络的处理,输出高精度EPRI图像。

    图  2  3MNet网络结构图
    Figure  2.  3MNet network structure diagram

    图像预处理子网络是从输入的含噪EPRI图像中提取出特征信息,再将特征图像和高噪图像进行拼接,此拼接图像作为三通道卷积子网络的输入,使整个网络可以学习到更加复杂的未知信息特征[24]。该子网络采用了5层全卷积网络,每个卷积层(convolutional layer,Conv)包含通道数为32的3×3 Conv+ReLU层。在最后一个卷积层之前,引入了一个双重注意力模块,该模块结合通道注意力[25]和空间注意力[26]来充分提取卷积层中的细节信息。

    双重注意力模块如图3所示。该模块首先进行两次3×3的Conv+ReLU操作得到特征图;空间注意力机制通过对特征图做全局平均池化(global average pooling,GAP)和全局最大池化(global max pooling,GMP),在拼接操作后通过通道数为1的1×1 Conv;最后sigmoid激活函数将输出的特征权重和输入的特征逐像素相乘保留了更多有用的细节特征。通道注意力机制通过GAP得到大小为1×1×f 的特征图,在1×1 Conv+ReLU操作后通道数变为${f}/{s}$;随后再通过1×1 Conv将通道数转换为f,在sigmoid激活函数后将输出的特征权重和输入的特征相乘;最后两分支输出的特征图进行拼接,通过1×1 Conv后与输入的特征逐像素相加。在本文中参数s=8,f=32。

    图  3  双重注意力模块
    Figure  3.  Dual attention module

    不断加深网络层数存在性能饱和问题,鉴于不同的网络架构可以提取到互补的特征信息,拟通过增加网络的宽度来提高去噪性能。三通道卷积子网络结合了残差密集块、空洞卷积以及UNet的优点,每个通道上都引入残差学习避免因网络过深而引起的梯度消失和梯度爆炸问题[27-28]

    第1层通道:该通道在传统DnCNN网络的第1个卷积层后引入如图4所示的残差密集连接块,该模块由3个Conv+ReLU以及拼接(Concatenate,Concat)操作构成,后1层均与之前层相互连接以增加网络的深度和宽度,使各卷积层之间的特征信息均被充分利用[29]。最后在该模块的输入与输出之间加入了残差学习。

    图  4  残差密集连接块
    Figure  4.  Residual dense connecting blocks

    第2层通道:该通道保留传统3×3卷积核的优点,使用扩张因子为1、2、5的空洞卷积提取不同层次的信息[30],增大了整个网络的感受野,以降低图像去噪的计算成本[31]。空洞卷积模块如图5所示,最后通过卷积操作将通道数变为2,并在输入与输出图像之间进行残差连接。

    图  5  空洞卷积模块
    Figure  5.  Dilated convolution module

    第3层通道:该通道将传统的UNet网络4层下采样结构减少为2层,减少了参数的计算量。在两次下采样之后加入通道注意力机制以明确特征通道之间的相互依赖性[32],可以更好的进行特征信息融合,增加网络的非线性映射能力[33]。通道注意力机制如图6所示。最后通过残差学习保证了输入和输出之间信息的完整性。

    图  6  通道注意力模块
    Figure  6.  Channel attention module

    图6所示的通道注意力机制首先对特征图进行GAP操作,将全局信息压缩到一个通道,得到大小为1×1×256的特征图,再通过两个全连接层(fully connected Layer,FC)+ReLU,中间层的通道数为2,最后在sigmoid激活函数后将输出的特征权重和输入的特征逐像素相乘,以获取到更加丰富的图像细节信息。

    该子网络首先使用3×3、5×5和7×7等不同大小的卷积核提取不同尺度的特征信息。3×3 Conv的padding为1,通道数为12。5×5 Conv的padding为2,通道数为32,7×7 Conv的padding为3,通道数为20。通过不同尺度得到的大小相同的特征图进行拼接,通道数为64。之后引入多尺度特征融合模块。

    多尺度特征融合模块如图7所示。首先分别通过卷积核大小为3×3、5×5、7×7、5×5和3×3五个Conv操作,然后通过一次GAP和两次FC操作,随后5个分支在相乘操作后进行逐像素相加,最后通过1×1 Conv将通道数变为1,并在该子网络的输入与输出之间进行残差连接,保证了该子网络输入输出之间信息的完整性。

    图  7  多尺度特征融合模块
    Figure  7.  Multi-scale feature fusion module

    实验数据集均由如图8所示的JIVA-25型小动物EPRI氧成像仪扫描获得。实验模体为5个装有不同浓度三苯甲基溶液的瓶子,通过不同浓度溶液的排列组合共构建了双瓶子和3瓶子模体各10个,共计25个实验模体构成该实验的实验数据,小瓶子示意图如图9 所示。

    图  8  EPRI氧成像仪示意图
    Figure  8.  Schematic of the EPRI oxygen imager
    图  9  EPRI小瓶子示意图
    Figure  9.  Schematic of EPRI small bottles

    实验在208个完备投影角度下2000次充分扫描后获得的投影数据作为高精度投影数据,200次不充分扫描后获得的作为含噪投影数据,经过FBP重建后的图像为80×80×80的三维EPRI图像。在XYZ三个方向进行切片处理,可以获得240张二维的80×80 EPRI图像,25个模体共计产生6000 张高精度以及对应的含噪EPRI图像,其中4800张作为训练集来训练网络的性能,600张作为测试集,600张作为验证集。部分EPRI图像如图10所示,第1行表示高精度EPRI图像,第2行表示与之相对应的含噪EPRI图像。在XYZ三个方向上分别选取一张复杂度最高的 EPRI图像,通过比较测试图像的峰值信噪比和结构相似度,以此来评价网络去噪性能的好坏。

    图  10  EPRI图像示意图
    Figure  10.  Schematic of EPRI images

    实验使用python 3.7和keras 2.3.1。采用的GPU是NVIDIA Geforce GTX 1080 Ti。采用Adam优化器对损失函数进行优化,迭代次数为12000,初始学习率为0.001,在迭代6000次后,损失函数下降为0.0001,batch_size设置为24。

    本文实验中,DnCNN、RED-CNN、UNet迭代12000次大概需运行2 h左右,CBDNet和BRDNet在同样的迭代次数下大概需运行2 h 30 min左右,而公开算法中去噪效果较好的PRIDNet则大约需3 h 40 min左右。本文提议的3MNet网络同样的迭代次数大概需运行2 h 50 min左右,其相较于去噪效果较好的PRIDNet网络有更优的去噪性能,且运行时间更少。虽然3MNet网络的运行时间高于除PRIDNet之外的其他网络,但有更好的去噪结果。

    为了评价网络的去噪性能,本文采用以下两个通用的评价指标:峰值信噪比(peak signal to noise ratio,PSNR)R和均方根误差(root mean square error,RMSE)e

    $$ {{{{R}}}}=20\,{\rm{lg}}\left(\frac{\max{(i)}}{\sqrt{E}}\right)\text{,} $$ (1)
    $$ {{{e}}} = \sqrt {\frac{1}{{mn}}\sum\limits_{i = 0}^{m - 1} {\sum\limits_{j = 0}^{n - i} {{{\Big( {I(i,j) - K(i,j)} \Big)}^2}} } } \text{,} $$ (2)

    其中I表示干净图像;K表示噪声图像;mn表示图像的高与宽;E表示两张$m \times n$大小的图像之间的均方误差;${\rm{max}}(i)$表示图像的最大灰度值;R是一种基于对应像素点之间误差的指标;e是用来衡量两张图像之间的偏差,取值越接近0,说明两张图像越相似。

    本节开展了两个实验,首先是3MNet网络与DnCNN、RED-CNN、UNet、CBDNet、BRDNet及PRIDNet六种经典的去噪网络在相同的EPRI数据集下进行实验对比,然后是3MNet内部子网络的消融实验。

    实验将200次不充分扫描后获得的含噪EPRI图像作为网络的输入,将2000次充分扫描后获得的高精度EPRI图像作为标签进行训练。分别在XYZ方向上选取 1张复杂度最高的EPRI图像进行定性分析,测试结果如图11图12所示。

    图  11  去噪结果示意图
    Figure  11.  Diagram of denoising results
    图  12  去噪结果局部放大图
    Figure  12.  Local enlarged view of denoising results

    图11可见,DnCNN的去噪结果图(c)仍存在明显噪声,组织结构信息模糊,严重干扰重要信息的判断;RED-CNN的去噪结果图(d)中图像重要信息丢失严重且表现过度平滑,未将噪声和重要特征信息分开处理,多数纹理细节被当成噪声去除;尽管UNet的去噪结果图(e)从视觉效果来看有效地压制了噪声,但局部区域的图像细节信息处理效果欠佳;CBDNet的去噪结果图(f)在保留组织边缘信息方面表现较好,肉眼可见的噪声已基本去除,然而图像内部两瓶子交汇之处纹理结构信息恢复不完整,组织边界区分不够清晰,未能处理好复杂的边缘细节部分;BRDNet的去噪结果图(g)周围轮廓处的噪声去除效果不如CBDNet,斑点噪声未完全去除干净,但是一些复杂的细节信息保留比较完整;PRIDNet的去噪结果图(h)相较与其他算法,尽可能地保留了EPRI图像中的细节特征,但图像中心的一些细节纹理结构模糊。

    为进一步定性比较本文算法的优越性,选取细节信息较多的X轴方向图像放大同等倍数后截取红色方框部分进行分析比较,由图12明显可见CBDNet、BRDNet、PRIDNet虽然整体上肉眼可见已经恢复大体结构信息,但本文提出的3MNet网络去噪结果图(i)保留了更多的图像细节信息,在局部细节上相似度更高,有效地压制了随机噪声。

    为了更加客观地对网络的去噪结果进行评价,表1给出了不同算法去噪实验的定量比较结果。从表1可见,在XYZ三个方向上本文提出的 3MNet网络较传统的去噪网络在PSNR和RMSE上都有较大提高。在X方向上 3MNet比去噪效果较好的PRIDNet网络在PSNR上高出2.823 dB,Y方向上高出 0.973 dB,Z方向上高出 0.744 dB,RMSE也是在X方向上数值变化幅度最大。同样,网络在Y方向上的结果 PSNR数值最高,Z方向上次之,X方向上最低,说明X方向上选取的 EPRI图像最为复杂,这也可以解释X方向上高出的 PSNR值远高于其他两个方向的原因,因为对于简单的图像传统的去噪网络已经可以处理的较好,故数值提高幅度不大,后期网络的改进主要参考在复杂EPRI图像上数值的变化幅度。

    表  1  去噪实验对比结果
    Table  1.  Comparison results of denoising experiments
    方法  X Y Z
    R/dBeR/dBeR/dBe
       DnCNN82.1421.563e-4 85.1751.102e-4 82.2341.547e-4
       RED-CNN83.4951.338e-488.4287.580e-585.4401.070e-4
       UNet89.1576.970e-589.2576.890e-589.0927.020e-5
       CBDNet92.8374.562e-595.4983.358e-595.2353.462e-5
       BRDNet93.5194.218e-596.9012.858e-596.0353.157e-5
       PRIDNet93.9434.017e-596.2843.068e-595.7703.255e-5
       3MNet96.7662.902e-597.2572.743e-596.5142.988e-5
    下载: 导出CSV 
    | 显示表格

    本文提出的3MNet去噪网络共分3个子网络:图像预处理子网络、三通道卷积子网络和多尺度卷积子网络,为探究其他两个子网络对三通道卷积子网络的影响,对3MNet网络去掉图像预处理子网络或多尺度卷积子网络或者两者都去掉进行实验对比分析。本次对比实验选取X方向上的 EPRI图像进行探究,实验结果如图13所示。将红框部分放大至相同倍数后对比分析,由图14可以观察到去掉任一子网络都会影响实验结果,且易发现两个子网络都去掉后细节信息损失较多。

    图  13  3MNet内部子网络实验对比图
    Figure  13.  3MNet comparison diagram of internal sub-network experiment
    图  14  3MNet内部子网络实验局部放大图
    Figure  14.  3MNet partial enlargement of internal sub-network experiment

    表2可见,3MNet网络在去掉多尺度卷积子网络后RSNR降低了1.119 dB,去掉图像预处理子网络后降低了1.444 dB,两者都去掉后降低了3.403 dB。RMSE的变化也符合此规律。定性和定量实验结果表明,两个子网络都去掉后大幅降低了网络的去噪性能,图像预处理比多尺度卷积子网络更能提高3MNet网络压制随机噪声的性能。

    表  2  3 MNet内部子网络实验对比结果
    Table  2.  3 MNet internal sub-network experimental comparison results
    方法    R/dBe(×10-5
        Remove both93.3634.294
        Remove image preprocessing95.3223.427
        Remove multiscale convolution95.6473.301
        3MNet96.7662.902
    下载: 导出CSV 
    | 显示表格

    本文提出的多通道、多尺度、多拼接的3MNet去噪网络,引入双注意力机制,使得网络可以更好的学习到真实环境下复杂的噪声特征;构建三通道卷积子网络,提高了网络对非均匀噪声分布图像的去噪性能;构建多尺度卷积子网络,提高了图像细节信息的学习能力;引入多拼接机制,增强了特征融合。

    与现有的其他6种去噪网络对比,本文提出的深度网络在EPRI图像去噪中,表现出更优的性能。基于3MNet的图像去噪技术,实现EPRI扫描过程接近10倍的加速效果。该网络使用的各种有效机制对其他成像模态中的图像处理问题,也有一定的借鉴意义。

    未来将在3MNet网络基础上进一步引入迁移学习,探究对EPRI图像细节信息恢复更强的注意力机制,以期实现更高精度的快速EPRI成像。

  • 图  1   推想人工智能评估新型冠状病毒奥密克戎变异株感染患者肺内病灶体积示意图

    患者,男,86岁,确诊为新型冠状病毒奥密克戎变异株感染。

    Figure  1.   Schematic diagram of InferVision artificial Intelligence evaluating the volume of lesions in the lung of patients infected with the COVID-19 omicron variant

    图  2   新型冠状病毒感染中型未转重症患者

    男,34岁,右肺上叶胸膜下斑片状磨玻璃密度影,可见小血管穿行。

    Figure  2.   COVID-19 medium type that was not converted to a severe case

    图  4   新型冠状病毒感染中型未转重症患者

    女,59岁,左肺上叶胸膜下束带状实变影、周围磨玻璃影。

    Figure  4.   COVID-19 medium type that was not converted to a severe case

    图  3   新型冠状病毒感染中型未转重症患者

    男,52岁,双肺下叶多发斑片状、小片状或小结节状磨玻璃密度影及条索,外带为主,可见小血管穿行。

    Figure  3.   COVID-19 medium type that was not converted to a severe case

    图  5   新型冠状病毒感染中型未转重症患者

    男性,53岁。(a)和(b)2022.12.15右肺下叶胸膜下斑片状磨玻璃密度影,边缘模糊、内可见增粗小血管。(c)和(d)2023.01.06复查,病灶基本吸收,可见淡薄磨玻璃影残留。

    Figure  5.   COVID-19 medium type that was not converted to a severe case

    图  6   新型冠状病毒感染中型未转重症患者

    男性,66岁,右肺上叶片状GGO,左肺上叶斑片状GGO,可见小叶间隔增厚及增粗小血管。

    Figure  6.   COVID-19 medium type that was not converted to a severe case

    图  7   新型冠状病毒感染中型转重症患者

    男性,67岁,双肺外周带分布磨玻璃密度影,沿支气管血管束分布,内见网格影、条索,血管增粗及胸膜增厚。

    Figure  7.   COVID-19 medium type that was converted to a severe case

    表  1   A组和B组全肺及各肺叶病灶体积及体积占比

    Table  1   The lesion volume and proportion of the whole lung and each lung lobe in groups A and B

    指标组别统计检验
    A组(n=450)B组(n=27)ZP
     全肺病灶体积占比/%2.43(0.45~7.43)40.45(33.47~46.60)75.868<0.001
     全肺病灶体积87.12(17.73~262.20)1239.21(841.54~1395.12)72.842<0.001
     右肺上叶病灶体积占比/%0.50(0~3.00)35.70(20.84~50.32)69.027<0.001
     右肺上叶病灶体积4.56(0~24.22)225.10(120.17~317.48)64.978<0.001
     右肺中叶病灶体积占比/%0.53(0~4.45)34.73(20.29~51.61)64.665<0.001
     右肺中叶病灶体积1.87(0~12.77)101.87(54.41~153.72)62.733<0.001
     右肺下叶病灶体积占比/%3.32(0.42~14.45)57.96(38.89~63.36)67.346<0.001
     右肺下叶病灶体积28.11(3.75~86.83)292.99(219.19~430.41)62.544<0.001
     左肺上叶病灶体积占比/%0.25(0~2.49)36.66(19.28~53.40)72.725<0.001
     左肺上叶病灶体积2.46(0~22.60)217.79(128.16~347.07)70.645<0.001
     左肺下叶病灶体积占比/%2.08(0.20~12.09)54.76(37.02~64.50)57.120<0.001
     左肺下叶病灶体积15.62(1.64~73.52)283.51(168.11~329.39)53.018<0.001
    下载: 导出CSV

    表  2   A组和B组病灶密度及各密度病灶体积占比

    Table  2   Lesion densities and volume proportion of each density in groups A and B

    病灶密度(HU)及占比组别统计检验
    A组B组ZP
     -570~-470体积12.15(2.46~35.315)141.75(101.24~197.83)70.193<0.001
     -570~-470体积占比/%13.89(11.38~16.24)13.18(11.11~15.10) 0.662 0.416
     -470~-370体积9.79(1.91~28.07)144.65(113.14~181.30)73.162<0.001
     -470~-370体积占比/%11.07(8.58~13.55)12.58(10.80~15.05) 8.352 0.004
     -370~-270体积7.42(1.37~21.21)125.49(100.26~174.70)73.630<0.001
     -370~-270体积占比/%8.48(6.12~10.93)12.52(9.88~15.32)22.392<0.001
     -270~-170体积5.28(1.03~15.84)107.73(84.18~174.06)72.647<0.001
     -270~-170体积占比/%6.27(4.32~8.95)10.10(8.18~14.70)22.871<0.001
     -170~-70体积3.76(0.72~12.42)88.10(55.36~146.54)68.923<0.001
     -170~-70体积占比/%4.75(2.76~7.27)7.69(6.34~11.04)17.093<0.001
     -70~30体积2.33(0.44~9.57)62.38(29.04~83.22)63.385<0.001
     -70~30体积占比/%3.22(1.49~5.77)5.25(3.41~6.60) 9.336 0.002
     30~70体积0.47(0.05~2.08)10.84(5.74~18.90)57.192<0.001
     30~70体积占比/%0.60(0.18~1.50)1.27(0.60~1.63) 5.928 0.015
     其他39.63(8.42~110.95)307.92(250.60~534.06)57.426<0.001
     其他占比/%47.91(35.69~59.69)36.02(23.45~42.65)16.879<0.001
    下载: 导出CSV
  • [1] 中华人民共和国国家卫生健康委员会. 关于印发对新型冠状病毒感染实施“乙类乙管”总体方案的通知 [EB/OL]. (2022-12-26)[2023-01-05]. http://www.nhc.gov.cn/xcs/zhengcwj/202212/e97e4c449d7a475794624b8ea12123c6.shtml.
    [2] 中华医学会放射学分会. 新型冠状病毒肺炎的放射学诊断: 中华医学会放射学分会专家推荐意见(第一版)[J]. 中华放射学杂志, 2020,54: E001−E001. DOI: 10.3760/cma.j.issn.1005-1201.2020.0001.

    Chinese Society of Radiology. Radiological diagnosis of new coronavirus infected pneumonitis: Expert recommendation from the Chinese Society of Radiology (First edition)[J]. Chinese Journal of Radiology, 2020, 54: E001−E001. DOI: 10.3760/cma.j.issn.1005-1201.2020.0001. (in Chinese).

    [3] 孙莹, 李玲, 刘晓燕, 等. 早期新型冠状病毒肺炎的胸部薄层平扫CT表现特征[J]. CT理论与应用研究, 2023,32(1): 131−138. DOI: 10.15953/j.ctta.2023.006.

    SUN Y, LI L, LIU X Y, et al. Imaging features of early COVID-19 on chest thin-slice non-enhanced CT[J]. CT Theory and Applications, 2023, 32(1): 131−138. DOI: 10.15953/j.ctta.2023.006. (in Chinese).

    [4] 中华人民共和国国家卫生健康委员会. 新型冠状病毒感染诊疗方案(试行第十版)[EB/OL]. (2023-01-06)[2023-01-20]. http://www.nhc.gov.cn/ylyjs/pqt/202301/32de5b2ff9bf4eaa88e75bdf7223a65a.shtml.
    [5]

    LI Q, GUAN X, WU P, et al. Early transmission dynamics in Wuhan, china, of novel coronavirus infected pneumonia[J]. The New England Journal of Medicine, 2020, 382(13): 1199−1207. DOI: 10.1056/NEJMoa2001316.

    [6]

    MUNSTER V J, KOOPMANS M, VAN D N, et al. A novel coronavirus emerging in China-key questions for impact assessment[J]. The New England Journal of Medicine, 2020, 382(8): 692−694. DOI: 10.1056/NEJMp2000929.

    [7] 靳英辉, 蔡林, 程真顺, 等. 新型冠状病毒 (2019-nCoV) 感染的肺炎诊疗快速建议指南(标准版)[J]. 解放军医学杂志, 2020,45(1): 1−20. DOI: 10.11855/j.issn.0577-7402.2020.01.01.

    JIN Y H, CAI L, CHENG Z S, et al. A rapid advice guideline for the diagnosis and treatment of 2019 novel coronavirus (2019-nCoV) infected pneumonia (Standard version)[J]. Medical Journal of Chinese People's Liberation Army, 2020, 45(1): 1−20. DOI: 10.11855/j.issn.0577-7402.2020.01.01. (in Chinese).

    [8]

    KERMANY D S, GOLDBAUM M, CAI W J, et al. Identifying medical diagnoses and treatable diseases by image-based deep learning[J]. Cell, 2018, 172(5): 1122−1131. DOI: 10.1016/j.cell.2018.02.010.

    [9]

    CHEN J, WU L L, ZHANG J, et al. Deep learning-based model for detecting 2019 novel coronaviruspneumonia on high-resolution computed tomography[J]. Scientificreports, 2020, 10(1): 1−11. DOI: 10.1038/s41598-020-76282-0.

    [10]

    YANG S, JIANG L, CAO Z, et al. Deep learning for detecting corona virus disease 2019 (COVID-19) on high resolution computed tomography: A pilot study[J]. Annals of Translational Medicine, 2020, 8(7): 450. DOI: 10.21037/atm.2020.03.132.

    [11]

    WANG R, JIAO Z, YANG L, et al. Artificial intelligence for prediction of COVID-19 progression using CT imaging and clinical data[J]. European Radiology, 2022, 32(1): 205−212. DOI: 10.1007/s00330-021-08049-8.

    [12]

    NICHOLLS J M, POON L L, LEE K C, et al. Lung pathology of severe acute respiratory syndrome[J]. Lancet, 2003, 361(9371): 1773−1778. DOI: 10.1016/s0140-6736(03)13413-7.

    [13]

    HUANG C L, WANG Y M, LI X W, et al. Clinical features of patients infected with 2019 novel coronavirus in Wuhan, China[J]. Lancet, 2020, 395(10223): 497−506. DOI: 10.1016/S0140-6736(20)30183-5.

    [14] 黄益龙, 张振光, 李翔, 等. CT影像组学联合征象鉴别新型冠状病毒肺炎与其他病毒性肺炎的价值[J]. 中华放射学杂志, 2022,56(1): 36−42. DOI: 10.3760/cma.j.cn112149-20201220-01318.

    HUANG Y L, ZHANG Z G, LI X, et al. The value of CT signs combined with radiomics in the differentiation of COVID-19 from other viral pneumonias[J]. Chinese Journal of Radiology, 2022, 56(1): 36−42. DOI: 10.3760/cma.j.cn112149-20201220-01318. (in Chinese).

    [15] 赵小二, 邓克学, 王朋. 不同阶段新型冠状病毒肺炎的CT影像演变分析[J]. 实用放射学杂志, 2021,37(8): 1254−1257. doi: 10.3969/j.issn.1002-1671.2021.08.008

    ZHAO X E, DENG K X, WANG P. Analysis of the CT manifestations changes of COVID-19 at different stages[J]. Journal of Practical Radiology, 2021, 37(8): 1254−1257. (in Chinese). doi: 10.3969/j.issn.1002-1671.2021.08.008

    [16] 吴杰, 肖安岭, 顾金凤. 多层螺旋CT对新型冠状病毒肺炎的临床诊断价值[J]. 实用放射学杂志, 2021,37(5): 746−748. DOI: 10.3969/j.issn.1002-1671.2021.05.013.

    WU J, XIAO A L, GU J F. Clinical value of MSCT in the diagnosis of COVID-19[J]. Journal of Practical Radiology, 2021, 37(5): 746−748. DOI: 10.3969/j.issn.1002-1671.2021.05.013. (in Chinese).

    [17] 余成成, 杨彦鸿, 胡天丽, 等. 新型冠状病毒B.1.617.2变异株感染者高分辨率CT与临床特点[J]. 中华放射学杂志, 2021,55(10): 1054−1058. DOI: 10.3760/cma.j.cn112149-20210618-00574.

    YU C C, YANG Y H, HU T L, et al. High resolution CT findings and clinical features of the novel corona-virus B.1.617.2 variant[J]. Chinese Journal of Radiology, 2021, 55(10): 1054−1058. DOI: 10.3760/cma.j.cn112149-20210618-00574. (in Chinese).

    [18] 赵建华, 柴军, 张晓琴, 等. 基于深度学习的新型冠状病毒肺炎转归胸部CT评价[J]. 国际放射医学核医学杂志, 2020,44(12): 737−743. DOI: 10.3760/cma.j.cn121381-202004048-00101.

    ZHAO J H, CHAI J, ZHANG X Q, et al. Chest CT evaluation of COVID-19 outcome based on deep learning[J]. International Journal of Radiation Medicine and Nuclear Medicine, 2020, 44(12): 737−743. DOI: 10.3760/cma.j.cn121381-202004048-00101. (in Chinese).

    [19] 谢正平, 戴峰, 蒋燕, 等. 重症甲型H1N1流感急性肺损伤的高分辨率CT影像学分析[J]. 现代医学, 2012,40(3): 276−280. doi: 10.3969/j.issn.1671-7562.2012.03.007

    XIE Z P, DAI F, JIANG Y, et al. HRCT imaging analysis of influenza a H1N1 complicated with severe lung injury[J]. Modern Medical Journal, 2012, 40(3): 276−280. (in Chinese). doi: 10.3969/j.issn.1671-7562.2012.03.007

    [20] 刘玉建, 仲建全, 冯浩, 等. 新型冠状病毒肺炎患者的高分辨率CT影像学特征[J]. 医疗装备, 2022,35(11): 1−4. doi: 10.3969/j.issn.1002-2376.2022.11.001

    LIU Y J, ZHONG J Q, FENG H, et al. Imaging characteristics of high resolution CT for patients with corona virus disease 2019[J]. Medical Equipment, 2022, 35(11): 1−4. (in Chinese). doi: 10.3969/j.issn.1002-2376.2022.11.001

图(7)  /  表(2)
计量
  • 文章访问数:  207
  • HTML全文浏览量:  61
  • PDF下载量:  28
  • 被引次数: 0
出版历程
  • 收稿日期:  2023-03-09
  • 修回日期:  2023-03-16
  • 录用日期:  2023-04-11
  • 网络出版日期:  2023-04-26
  • 发布日期:  2023-09-21

目录

/

返回文章
返回
x 关闭 永久关闭