一、需求描述

寻求成果转化合作伙伴，有意者欢迎沟通。

二、项目概况

基于多模态知识图谱的阿尔茨海默病健康管理平台研究

1、项目简介

阿尔茨海默病（AD）是一种不可治愈神经退行性疾病。早期诊断与干预治疗能够有效延缓疾病发展。多模态数据分析能够充分挖掘信息来获得更高的预测性能。基于上述背景，本项目基于多模态知识图谱的AD健康管理平台，首先基于公开数据库搭建多模态知识图谱，接着搭建基于多模态数据的双图注意力网络用于早期AD诊断，最后根据诊断结果结合知识图谱给出相对应的诊疗建议。项目有望实现AD早期诊断智能化和个性化，具有重大临床意义。

2、技术创新

-融合多模态数据发掘患者信息；

-搭建智能诊断模型用于AD早期诊断；

-基于知识图谱和智能诊断模型搭建AD健康管理平台。

3、核心产品技术

图1：AD健康管理平台构建流程图

AD健康管理平台建造流程如下：

-n不同类型的数据源构建医学知识图谱；

-nAD智能诊断模型进行疾病评估；

-n医学知识图谱和智能诊断模型搭建AD健康管理平台。

图2：底层算法原理

AD智能诊断模型流程如下：

n基因信息、影像信息和患者临床信息构建双图；

n图卷积网络提取双图特征信息；

n自注意力机制和交叉注意力机制融合多模态信息；

知识图谱展示：

诊断界面展示：

4、专利情况

申请号（授权号）：

[P1]雷柏英，杨鹏，汪天富，秦璟，倪东，陈思平，“脑疾病分类装置、用户终端和计算机可读存储介质”，授权日：20210129，专利号：ZL201811095737.0；

[P2]雷柏英,梁恩民,刘勇,汪天富，“一种基于半监督联邦学习的脑影像分类方法及终端设备”， 专利申请日：20210709，专利号：：202110780755.8，公开号：CN113688862B；

[P3]汪天富，黄芳琳，雷柏英，“脑疾病分类模型的构建方法、装置及智能终端”，专利授权日：20210803，专利号：2019106288975；

[P4]雷柏英，李亚锋，杨鹏，汪天富，“一种基于SNP数据和MRI数据的分类方法及终端设备”，专利申请日：20211222，专利号：2021115838632，公开号：CN114267408A；

[P5]宋雪刚，雷柏英，李平康，杨鹏，汪天富，“一种脑图像分类方法、分类装置、设备及存储介质”，申请日： 20221123，专利号：CN115861690A。