[1]邓杰夫,奚峥皓,黄陈,等.基于交叉注意力的CT与MRI直肠癌病灶分割方法[J].中国医学物理学杂志,2024,41(8):953-959.[doi:DOI:10.3969/j.issn.1005-202X.2024.08.005]
 DENG Jiefu,XI Zhenghao,HUANG Chen,et al.Segmentation of rectal cancer lesions on CT and MRI based on cross attention[J].Chinese Journal of Medical Physics,2024,41(8):953-959.[doi:DOI:10.3969/j.issn.1005-202X.2024.08.005]
点击复制

基于交叉注意力的CT与MRI直肠癌病灶分割方法()
分享到:

《中国医学物理学杂志》[ISSN:1005-202X/CN:44-1351/R]

卷:
41卷
期数:
2024年第8期
页码:
953-959
栏目:
医学影像物理
出版日期:
2024-08-31

文章信息/Info

Title:
Segmentation of rectal cancer lesions on CT and MRI based on cross attention
文章编号:
1005-202X(2024)08-0953-07
作者:
邓杰夫1奚峥皓1黄陈2刘翔1
1.上海工程技术大学电子电气工程学院, 上海 201620; 2.上海交通大学附属第一人民医院普外科, 上海 200080
Author(s):
DENG Jiefu1 XI Zhenghao1 HUANG Chen2 LIU Xiang1
1. School of Electronic and Electrical Engineering, Shanghai University of Engineering Science, Shanghai 201620, China 2. Department of General Surgery, Shanghai General Hospital, Shanghai Jiao Tong University, Shanghai 200080, China
关键词:
直肠癌语义分割交叉注意力Transformer
Keywords:
Keywords: rectal cancer semantic segmentation cross attention Transformer
分类号:
R318
DOI:
DOI:10.3969/j.issn.1005-202X.2024.08.005
文献标志码:
A
摘要:
针对直肠癌辅助诊断过程中部分医学图像分割模型只适用于单一模态图像的局限性,提出一种基于交叉注意力机制并同时适用于CT与MRI两种模态的医学图像分割方法。首先,针对CT与MRI两种图像特征表示不同,提出一种交叉注意力机制统一两类图像的特征表示;其次,针对直肠癌图像病灶区域较小的特点,提出三支路的改进Swin Transformer分割网络,并将交叉注意力机制加入其中,使模型对两种图像都能进行病灶区域的分割;最后,使用该方法在直肠癌患者的CT与MRI影像数据进行验证,与ADDA、CycleGAN和SIFA方法相比,在CT图像上的准确率分别提高2.94%、3.05%、0.71%,在MRI图像上的准确率分别提高了3.31%、4.55%、1.76%。实验结果表明该方法对于两类图像具有更好的分割性能。
Abstract:
Abstract: In response to the limitation of some medical image segmentation models for rectal cancer auxiliary diagnosis that are only applicable to single-modality images, a medical image segmentation method based on a cross attention mechanism that is applicable to both CT and MRI modalities is presented. Considering the different feature representations of CT and MRI images, a cross attention mechanism is proposed to unify the feature representations of the two types of images. In view of the small lesions on rectal cancer images, an improved Swin Transformer segmentation network with 3 branches is established, and the cross attention mechanism is incorporated into it, enabling the model to segment lesion areas in both types of images. The proposed method is validated using CT and MRI image data from patients with rectal cancer. Compared with ADDA, CycleGAN, and SIFA methods, the proposed method improves the accuracy by 2.94%, 3.05%, 0.71% on CT images, and 3.31%, 4.55%, 1.76% on MRI images, respectively, demonstrating its superior segmentation performance for both types of images.

相似文献/References:

[1]张武哲,陈志坚,彭 逊,等.不同角度固定野动态调强在直肠癌术前放疗中的剂量学比较[J].中国医学物理学杂志,2014,31(02):4735.[doi:10.3969/j.issn.1005-202X.2014.02.004]
[2]李忠伟,张九堂,吴智理,等.R620-ACF型腹部碳纤维托架对直肠癌调强放射治疗剂量的影响[J].中国医学物理学杂志,2014,31(05):5148.[doi:10.3969/j.issn.1005-202X.2014.05.012]
[3]吴虹,翟福山,刘明,等.应用CBCT研究膀胱体积大小对直肠癌术后放疗剂量学的影响[J].中国医学物理学杂志,2013,30(04):4253.[doi:10.3969/j.issn.1005-202X.2013.04.010]
[4]张艺宝,吴昊,李莎,等.临床前验证与几何对比分析基于图谱库的危及器官自动勾画[J].中国医学物理学杂志,2015,32(06):761.[doi:doi:10.3969/j.issn.1005-202X.2015.06.001]
 [J].Chinese Journal of Medical Physics,2015,32(8):761.[doi:doi:10.3969/j.issn.1005-202X.2015.06.001]
[5]王沛沛,刘哲铭,李彩虹,等.容积旋转调强与固定野动态调强在直肠癌新辅助放疗中的剂量学比较[J].中国医学物理学杂志,2015,32(06):901.[doi:doi:10.3969/j.issn.1005-202X.2015.06.030]
 [J].Chinese Journal of Medical Physics,2015,32(8):901.[doi:doi:10.3969/j.issn.1005-202X.2015.06.030]
[6]姚文良,许波,戚金凤,等.直肠癌术前不同照射技术剂量学比较[J].中国医学物理学杂志,2016,33(3):317.[doi:DOI:10.3969/j.issn.1005-202X.2016.03.021]
 [J].Chinese Journal of Medical Physics,2016,33(8):317.[doi:DOI:10.3969/j.issn.1005-202X.2016.03.021]
[7]黎旦,宾石珍,程品晶,等.非晶硅电子射野影像系统与Arc CHECK在直肠癌容积旋转调强剂量验证中的应用[J].中国医学物理学杂志,2016,33(7):674.[doi:10.3969/j.issn.1005-202X.2016.07.006]
 [J].Chinese Journal of Medical Physics,2016,33(8):674.[doi:10.3969/j.issn.1005-202X.2016.07.006]
[8]王贝,全红,邱杰,等. 容积旋转调强技术用于直肠癌时最佳机架角度设置研究[J].中国医学物理学杂志,2016,33(9):898.[doi:10.3969/j.issn.1005-202X.2016.09.006]
 [J].Chinese Journal of Medical Physics,2016,33(8):898.[doi:10.3969/j.issn.1005-202X.2016.09.006]
[9]孙永健,曹洋森,代智涛,等.Monaco设计直肠癌固定机架角调强和容积旋转调强治疗的剂量[J].中国医学物理学杂志,2017,34(2):161.[doi:10.3969/j.issn.1005-202X.2017.02.010]
 Dosimetric comparison of seven- field intensity modulated radiotherapy and volumetric modulated arc therapy for rectal cancer designed with Monaco[J].Chinese Journal of Medical Physics,2017,34(8):161.[doi:10.3969/j.issn.1005-202X.2017.02.010]
[10]段隆焱,蔡钢,陈毅,等. Compass在直肠癌术前调强放射治疗三维剂量验证中的应用[J].中国医学物理学杂志,2017,34(12):1200.[doi:DOI:10.3969/j.issn.1005-202X.2017.12.003]
 ,,et al. Application of Compass system in three-dimensional dose verification of preoperative intensity-modulated radiotherapy plan for rectal cancer[J].Chinese Journal of Medical Physics,2017,34(8):1200.[doi:DOI:10.3969/j.issn.1005-202X.2017.12.003]

备注/Memo

备注/Memo:
【收稿日期】2024-04-15 【基金项目】国家自然科学基金(12104289);上海申康医院发展中心临床三年行动计划(SHDC2020CR4022);上海市教育委员会高峰高原学科建设计划(20191425);CSCO-青年创新肿瘤研究基金(Y-Young2020-0458);上海市松江区科技攻关项目(2020SJ255) 【作者简介】邓杰夫,硕士研究生,研究方向:计算机视觉、医学图像处理,E-mail: m320121349@sues.edu.cn 【通信作者】奚峥皓,博士,副教授,研究方向:计算机视觉、智能认知学习与控制,E-mail: zhenghaoxi@hotmail.com
更新日期/Last Update: 2024-08-31