结合改进注意力的肠胃镜图像深度估计

作者：林飞凡; 李凌^*; 徐强

来源：计算机系统应用, 2023, 1-10.

DOI：10.15888/j.cnki.csa.009343

• 肠胃镜图像
• 深度估计
• 生成对抗网络
• 注意力机制
• 双尺度特征

针对肠胃镜诊疗系统存在图像关键信息模糊和适应性差等问题,提出一种结合改进注意力机制的循环生成对抗网络,以实现对消化道深度信息的准确估计.该网络以CycleGAN为基础网络,结合双重注意力机制,并引入残差门控机制和非局部模块来更全面地捕捉和理解输入数据的特征结构和全局相关性,从而提高深度图像生成的质量和适应性;同时采用双尺度特征融合网络作为判别器,以提升其判别能力并平衡与生成器之间的工作性能.实验结果表明,在肠胃镜场景中预测效果良好,相比其他无监督方法,在胃道、小肠和结肠数据集上平均准确度分别提升了7.39%、10.17%和10.27%.同时在实验室人体胃道器官模型上也能够准确地估计出相对深度信息,并提供精确的边界信息.

• 单位
  湘潭大学