首页 | 本学科首页   官方微博 | 高级检索  
     

基于DCIF-GAN的肺部肿瘤PET/CT跨模态医学图像融合
作者姓名:周涛  程倩茹  张祥祥  李琦  陆惠玲
作者单位:1. 北方民族大学计算机科学与工程学院;2. 北方民族大学图像图形智能处理国家民委重点实验室;3. 宁夏医科大学医学信息工程学院
基金项目:宁夏自然科学基金资助项目(No.2022AAC03149);
摘    要:基于生成对抗网络(Generative Adversarial Network,GAN)的医学图像融合是计算机辅助诊断领域的研究热点之一,但是现有基于GAN的融合方法存在训练不稳定,提取图像的局部和全局上下文语义信息能力不足,交互融合程度不够等问题。针对上述问题,本文提出了双耦合交互式融合GAN (Dual-Coupled Interactive Fusion GAN, DCIFGAN)。首先,设计了双生成器双鉴别器GAN,通过权值共享机制实现生成器之间和鉴别器之间的耦合,通过全局自注意力机制实现交互式融合;第二,设计耦合CNN-Transformer的特征提取模块(Coupled CNN-Transformer Feature Extraction Module, CC-TFEM)和特征重构模块(CNN-Transformer Feature Reconstruction Module, C-TFRM),提升了对同一模态图像内部的局部和全局特征信息提取能力;第三,设计跨模态交互式融合模块(Cross Model Intermodal Fusion Module, CMIFM),通过跨...

关 键 词:医学图像  图像融合  PET/CT  耦合生成对抗网络  Swin Transformer
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号