江苏海洋大学学报(自然科学版)2022,Vol.31Issue(2) :54-63.DOI:10.3969/j.issn.2096-8248.2022.02.008

基于双判别器生成对抗网络的PET和MRI图像融合

PET and MRI Image Fusion Based on Generative Adversarial Network with Dual Discriminators

贺天福 康家银 武凌霄 姬云翔
江苏海洋大学学报(自然科学版)2022,Vol.31Issue(2) :54-63.DOI:10.3969/j.issn.2096-8248.2022.02.008

基于双判别器生成对抗网络的PET和MRI图像融合

PET and MRI Image Fusion Based on Generative Adversarial Network with Dual Discriminators

贺天福 1康家银 1武凌霄 1姬云翔1
扫码查看

作者信息

  • 1. 江苏海洋大学电子工程学院,江苏连云港 222005
  • 折叠

摘要

正电子发射断层扫描(positron emission tomography,PET)是一种功能型成像技术,PET图像能够反映人体丰富的组织信息,但其分辨率较低.磁共振成像(magnetic resonance imaging,MRI)是一种结构型成像技术,MRI图像能够反映人体的解剖结构信息,且分辨率较高.将PET与MR I进行有效融合,同时保留二者所携带的有用信息,能够更好地应用于临床疾病的诊断.为此提出了一种双判别器生成对抗网络(generative adversarial network,GAN)的PET与MRI图像融合方法,具体为:①将PET图像由RGB彩色空间转换为YCbCr彩色空间;②将PET图像的Y分量与MR I图像进行"联结",然后输入到密集连接与源图像插入的生成器网络中,得到融合结果,即融合的PET图像的Y分量;③将融合的PET图像的Y分量与源图像(PET图像的Y分量和MRI图像)分别输入到两个判别器中,与生成器进行对抗训练;④对融合得到的Y分量,连同PET图像的Cb和Cr分量进行YCbCr到RGB的反变换,从而得到最终的融合图像.实验结果表明,相较于其他几种基于GAN的融合方法,所提出的算法的融合结果在主观判读与客观定量评价中都取得了更优的结果.

关键词

图像融合/正电子发射断层/磁共振成像/生成对抗网络

引用本文复制引用

基金项目

江苏省自然科学基金(BK20191469)

江苏海洋大学研究生科研创新项目(DZXS202008)

出版年

2022
江苏海洋大学学报(自然科学版)
淮海工学院

江苏海洋大学学报(自然科学版)

影响因子:0.433
ISSN:1672-6685
被引量1
参考文献量4
段落导航相关论文