公开(公告)号：CN117935345A

公开(公告)日：2024-04-26

申请号：CN202410117696.X

申请日：2024-01-29

Applicant: 哈尔滨医科大学附属第一医院

Inventor： 郝明 ,  匡洪宇 ,  谢怡宁 ,  龙俊 ,  张天雨 ,  王雪宁

IPC: G06V40/18 ,  G06V40/14 ,  G06V10/26 ,  G06V10/44 ,  G06V10/764 ,  G06V10/82 ,  G06T7/00 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明基于多模态融合与注意力机制的糖尿病性视网膜病变检测方法、系统及存储介质，涉及深度学习及医学图像处理领域，为解决现有方法对早期病变区域关注度不足易导致漏诊或误诊，而中晚期视网膜病不适用于早期病变同样的检测模型的问题。包括：S1、将患者眼底图像分类为早期病变图像和中晚期病变图像；S2、计算早期病变眼底血管静脉分形维数与分支角度作为生物标志物；S3、构建多模态融合的早期糖尿病视网膜病变检测模型，通过投票门控机制计算眼底图像特征向量与生物标志物特征向量的融合权重，通过加权融合后进行检测；S4、对晚期视网膜病变图像进行通道病变注意力加权；S5、构建晚期糖尿病性视网膜病变检测模型对中晚期病变类型进行检测。