融合跨视角特征和注意力机制的医学影像报告生成方法
Medical Image Report Generation Method Fusing Cross-View Features and Attention Mechanism
摘要目的 探索一种跨视角医学影像和医学报告对齐的策略,以优化深度学习模型自动生成医学影像报告的质量.方法 设计融合跨视角特征和注意力机制的生成模型,首先基于预训练模型编码不同角度拍摄的医学影像特征和报告病理描述特征;然后利用多种注意力机制完成特征的融合计算;最后利用解码器将联合特征解译成病例报告.结果 在权威公开的胸部X光数据集IU X-Ray上经过多轮测试可知,该模型在BLEU-1、BLEU-2、BLEU-3、BLEU-4、METEOR、ROUGE_L和P_MEAN评价指标上平均高于先前提出方法的8.34%、14.20%、10.90%、6.14%、1.70%、5.50%,综合性能提升7.79%.结论 该模型在生成报告的准确度和流畅度方面表现良好,说明该融合策略可以更好地捕捉影像和报告之间的潜在联系,提升模型生成报告的性能.
更多相关知识
- 浏览2
- 被引0
- 下载0

相似文献
- 中文期刊
- 外文期刊
- 学位论文
- 会议论文


换一批



