多模态大语言模型应用于宫颈病变诊断的可行性研究
Feasibility study on the application of multimodal large language models in the diagnosis of cervical lesions
摘要目的:基于阴道镜宫颈图像及其临床文本信息,探索利用多模态大语言模型GPT-4o诊断宫颈癌及癌前病变[中度及以上宫颈上皮内瘤样病变(CIN2+)]的可行性,并探讨不同信息输入模式(尤其是提示工程与少样本学习模式)对模型诊断效能的影响。方法:回顾性纳入2023年1—12月在鄂尔多斯市三家妇幼保健院接受阴道镜检查的患者144例。根据是否提供临床文本信息[人乳头状瘤病毒/液基细胞学检查(HPV/TCT)初筛结果]以及是否给予示例和结构化提示,设计四种判读模式:标准零样本判读(SZD)、仅图像零样本判读(IZD)、提示增强少样本判读(PA-FSD)和仅图像提示增强少样本判读(IPA-FSD)。通过比较不同模式下诊断CIN2+的准确率、敏感度、特异度等指标,评估模型的诊断能力。结果:在所有模式中,PA-FSD表现最优,准确率为0.854,敏感度为0.820,特异度为0.872,F1值为0.796,与组织病理金标准的一致性最高(κ=0.683)。PA-FSD的准确率显著高于IPA-FSD、SZD和IZD模式(均 P<0.01)。 结论:GPT-4o在CIN2+的识别中展现出良好的可行性。通过融合临床文本信息与结构化推理提示,模型诊断性能得到显著增强,尤其在少样本学习场景下优于传统零样本模式。
更多相关知识
- 浏览3
- 被引0
- 下载0

相似文献
- 中文期刊
- 外文期刊
- 学位论文
- 会议论文


换一批



