基于"图像-光谱"联合特征的舌苔分类方法研究
Study on Tongue Coating Classification Method Based on Joint"Image-Spectrum"Features
摘要目的 本研究旨在融合舌苔图像特征与光谱信息,利用机器学习模型提升舌苔分类的准确性和可靠性,为中医舌诊提供数字化支持.方法 采用"TFDA-1型舌面诊仪"采集中医舌象图像特征,PG2000-PRO-EX光纤光谱仪采集舌苔的光谱数据.对数据进行整理和筛选后共获得1023 例舌象数据:白苔 692 例、黄苔 261 例、灰黑苔37 例;腻苔358 例、厚苔 473 例、薄苔 455 例、剥苔 95 例.以图像特征和光谱信息为基础,构建深度学习模型,该模型结合残差网络(ResNet50V2)和一维卷积神经网络(Conv1D),通过特征融合与全连接层实现舌苔分类.再利用梯度加权类激活映射(Grad-CAM)对ResNet50V2 模型的关键特征区域进行可视化,并通过随机森林方法评估光谱波段的特征重要性,揭示图像与光谱信息在舌苔分类中的作用.结果 单独基于图像特征的分类模型在腻苔判别和舌苔厚度分类上的准确率分别为 0.869 和 0.807;引入光谱信息后,准确率分别提升至 0.935 和0.895,表明特征层融合增强了这两类特征的分类性能.舌苔颜色分类在引入光谱信息后分类性能无显著提升,准确率为 0.864.Grad-CAM热力图显示舌苔颜色、腻苔判别及厚度分类的关键区域分别集中于苔面、舌边及舌外侧或剥落处.随机森林的重要性评分显示白苔、黄苔、灰黑苔在 380~510 nm差异显著,腻苔整体反射率偏高,剥苔至厚苔在400~600 nm逐渐增强.结论 本研究通过整合舌苔图像与光谱数据的多模态信息,结合深度学习模型的应用,提高了腻苔判别和舌苔厚度分类的准确性.
更多相关知识
- 浏览0
- 被引1
- 下载0

相似文献
- 中文期刊
- 外文期刊
- 学位论文
- 会议论文


换一批



