weixin_44883789的博客

背景：在自然语言和视觉识别方面，大规模数据上预训练的多模态基础模型取得了成功。但由于医疗任务的细粒度性质和对领域知识的高需求，它们在医学领域的使用仍然受到限制。方法：提出了一种称为知识增强自动诊断KAD）的新方法，该方法利用现有的医学领域知识，使用配对的胸部 X 射线和放射学报告来指导视觉语言预训练。结果（1）在四个外部 X 射线数据集上评估了KAD①证明了零样本性能可以与完全监督模型相媲美②优于三位放射科专家针对三种（out of five）病理学的统计平均值意义。（2）此外，当可以用。