近年来,深度学习技术广泛应用于计算机辅助诊断,然而收集有经验专家的标注诊断结果数据,用以监督和训练深度神经网络计算机诊断模型成本较高。有研究显示,医生的眼动轨迹包含一定模式特征以及大量诊断相关信息,并与诊断结论密切相关。
近期,来自上海科技大学的研究团队使用放射科医生眼动信息构建计算机辅助诊断网络。研究成果发表于《IEEE Transactions on Medical Imaging》,题目为:Follow My Eye: Using Gaze to SuperviseComputer Aided Diagnosis。研究人员使用眼动仪采集模拟临床工作状态下的医生眼动数据,使用软件记录使用者在屏幕上的注视位置和相应的时间戳,直到有信心做出诊断决定,眼动信息数据覆盖医生读片和诊断完整周期。在构建计算机辅助诊断网络时加入注意力一致性(Attention Consistency, AC)模块,对计算出的网络注意力图与眼动注意力图进行约束。研究在膝关节X光平片数据上进行了验证,结果表明,放射科医生的眼动信息约束可以有效提高网络对病变部位的定位能力,不需要额外标注时间的眼动监督模型在X光骨关节炎分级任务中性能优越。
研究证明了放射科医生阅片时的眼动信号可以作为监督深度神经网络训练的有效信息,探索得出了基于深度神经网络的计算机辅助诊断系统的简单有效的训练方法,为发展计算机辅助诊断提供了新的思路。
-leyu体育