Hypercomplex Graph Neural Network: Towards Deep Intersection of Multi-Modal Brain Networks

摘要

在多模态脑影像融合与轻度认知障碍MCI辅助诊断研究方面，本文提出了脑结构网络与脑功能网络耦合和互补性关系网络模型，通过引入一种高效的跨模态图网络的方法构建了动态多模态关系网络，功能和结构连接组被编码和映射到一个组合空间进行推理，通过构建耦合关系矩阵实现了互补性关系的学习和表达，该方法充分构建了模态间互补性，并通过依赖关系分析和建立了疾病关联，在多种类型疾病的诊断上实现了领域顶尖水平（MCI分类准确率达到81.5%），并通过耦合关系矩阵发现了脑连接和脑区水平的疾病标志物。