公开(公告)号：CN119818025A

公开(公告)日：2025-04-15

申请号：CN202411871484.7

申请日：2024-12-18

Applicant: 东南大学

Inventor： 刘澄玉 ,  赵鸣晖 ,  赵璐璐 ,  李建清

IPC: A61B5/00 ,  A61B5/16 ,  A61B5/369 ,  A61B5/318 ,  G06F18/25 ,  G06N3/0464 ,  G06N3/045 ,  G06N3/08

Abstract: 本发明专利公开了一种基于多维认知功能超图的多模态认知障碍评测系统，包括多模态信号采集系统、认知功能评测范式设计、各模态通用特征提取框架与基于多维认知功能的在线超图学习。系统基于多模态生理与行为信号，构建了包含认知功能维度评测范式，从而实现对老年认知功能的全面评估。首先通过融合脑电、心电、语音和面部表情等多模态信号，实时记录和分析用户在不同任务和情境下的生理和行为反应。然后挖掘多模态信号之间的融合表征，生成统一的特征表示，并引入了临床知识的在线超图，捕捉复杂的多模态数据关系，提供包含认知功能评估的分析结果。最终，结合上述技术手段，系统能够实现对认知障碍的早期检测。

公开(公告)号：CN116312643A

公开(公告)日：2023-06-23

申请号：CN202310244687.2

申请日：2023-03-14

Applicant: 东南大学

Inventor： 刘澄玉 ,  辛雨 ,  赵鸣晖 ,  赵璐璐 ,  李建清

IPC: G10L25/63 ,  G10L25/66 ,  G10L25/45 ,  G10L25/30 ,  G10L15/04 ,  G10L25/24

Abstract: 本发明提供了一种基于语音特征的抑郁情绪检测方法，包括分别采集多位个体的语音数据，以及对应的抑郁指标量表得分，构建语音抑郁数据集；对采集的语音信号依次进行预加重、分帧加窗和端点检测处理；对预处理后的语音信号进行分帧，得到多个帧片段，计算每个帧片段的声学特征及统计学特征；将所述声学特征和抑郁量表的判断结果输入到长短时记忆网络模型中，训练语音抑郁状态识别模型；搭建基于安卓系统的APP，将数据预处理、特征提取和语音抑郁状态识别模型进行封装，部署到安卓系统后端程序中，形成基于语音特征的抑郁状态识别系统，应用于智能设备终端。本发明利用智能终端APP对抑郁状态判断结果进行管理，帮助佩戴者实时了解自身的身心健康状况。