上交大与上海AI lab研发胸部X-ray疾病诊断基础模型，成果入选Nature子刊

2023-07-05 机器之心 等1家媒体报道 科研进展





打开微信“扫一扫”
点击右上角分享按钮

2023年7月5日，上海交通大学与上海人工智能实验室联合团队探索了基于医学知识增强的基础模型预训练方法，发布了首个胸部X-ray的基础模型，即KAD（Knowledge-enhanced Auto Diagnosis Model）。该模型通过在大规模医学影像与放射报告数据进行预训练，通过文本编码器对高质量医疗知识图谱进行隐空间嵌入，利用视觉-语言模型联合训练实现了知识增强的表征学习。在不需要任何额外标注情况下，KAD模型即可直接应用于任意胸片相关疾病的诊断，为开发人工智能辅助诊断的基础模型提供了一条切实可行的技术路线。研究论文《Knowledge-enhanced Visual-Language Pre-training on Chest Radiology Images》已被知名国际期刊《自然 - 通讯》（Nature Communications）接收。