HoloDx:基于知识和数据的多模态阿尔茨海默病诊断方法

《IEEE Transactions on Materials for Electron Devices》:HoloDx: Knowledge- and Data-Driven Multimodal Diagnosis of Alzheimer’s Disease

【字体: 大 中 小 】 时间:2026年01月06日 来源:IEEE Transactions on Materials for Electron Devices

编辑推荐:

  HoloDx框架通过知识注入模块和记忆注入模块整合多模态临床数据与领域知识,提升阿尔茨海默病早期诊断的准确性和可解释性,实验表明其优于现有方法。

  

摘要:

准确诊断阿尔茨海默病(AD)需要有效整合多模态数据和临床专业知识。然而,现有方法往往难以充分利用多模态信息,并且缺乏结构化的机制来结合动态领域知识。为了解决这些限制,我们提出了HoloDx,这是一个基于知识和数据的框架,通过将领域知识与多模态临床数据对齐来提升AD的诊断能力。HoloDx包含一个知识注入模块,该模块采用基于知识的门控交叉注意力机制,使模型能够动态地整合来自大型语言模型(LLM)和临床专业知识的领域特定见解。此外,一个带有原型记忆注意力的记忆注入模块进一步确保了决策路径的一致性。通过这些组件的协同工作,HoloDx在保持精确的知识-数据对齐的同时,提高了可解释性。在五个AD数据集上的评估表明,HoloDx的性能优于现有最先进的方法,在不同患者群体中实现了更高的诊断准确性和更强的泛化能力。源代码发布在https://github.com/Qybc/HoloDx

引言

阿尔茨海默病(AD)是一种进行性神经退行性疾病,会导致记忆丧失、认知能力下降,最终丧失独立生活能力。准确诊断AD对于制定适当的治疗策略、规划未来的护理以及为患者及其家庭提供支持至关重要。最近在被动免疫疗法(如Lecanemab和Donanemab)方面的进展[1]、[2]、[3]、[4]显示出针对AD病理特征——淀粉样β斑块的潜力。然而,由于临床症状微妙且与正常衰老过程存在重叠,特别是在早期阶段诊断AD仍然具有挑战性。传统的诊断方法通常依赖于单模态数据(如神经影像学或临床评估),难以捕捉到这些细微的变化[5]、[6]。为了解决这些限制,多模态学习因其能够整合多种数据源(如神经影像学、临床记录和遗传信息)而受到关注,从而提供了对AD早期病理变化的更全面视角[7]、[8]、[9]、[10]。尽管数据驱动的方法具有潜力,但仍存在重大挑战:1)数据偏见,即这些方法侧重于常见模式,而常常忽略罕见和非典型病例;2)缺乏可解释性,因为许多模型像不透明的黑盒一样运作,难以追踪因果关系并确保可靠性。这些限制阻碍了现有计算机辅助诊断(CAD)系统的一致性、鲁棒性和可信度。如图1所示,解决这些缺陷需要一种协同范式,即将多模态数据驱动模型的优势与领域知识相结合,从而在AD及其早期诊断的背景下提高可解释性、可靠性和泛化能力。

我们提出的计算机辅助整体诊断(HoloDx)系统的示意图。(A) 传统方法依赖于预定义的知识图谱,这些图谱受到人工策划的限制且更新缓慢。(B) 我们的框架将大型语言模型(LLM)生成的一般医学知识与医院的专家知识相结合,并将其注入到多模态数据驱动系统中,以实现适应性诊断。

相关新闻
生物通微信公众号
微信
新浪微博
  • 搜索
  • 国际
  • 国内
  • 人物
  • 产业
  • 热点
  • 科普

热点排行

    今日动态 | 人才市场 | 新技术专栏 | 中国科学人 | 云展台 | BioHot | 云讲堂直播 | 会展中心 | 特价专栏 | 技术快讯 | 免费试用

    版权所有 生物通

    Copyright© eBiotrade.com, All Rights Reserved

    联系信箱:

    粤ICP备09063491号