-
公开(公告)号:CN118885797A
公开(公告)日:2024-11-01
申请号:CN202411018976.1
申请日:2024-07-29
Applicant: 西安电子科技大学
Inventor: 万波 , 黄嘉阳 , 熊帮 , 李昕泰 , 李奉奇 , 杨鹏飞 , 刘锦辉 , 赵辉 , 罗楠 , 王笛 , 王义峰 , 刘刚 , 王泉 , 潘蓉 , 李少峰 , 钟昊迪 , 韩磊
IPC: G06F18/213 , G06F18/25 , G06F18/10 , G06N3/0464 , G06F18/27 , G06N3/096 , G06N3/084
Abstract: 本发明公开了一种基于子空间距离的跨用户警觉度监测方法,解决了跨用户警觉度监测中的模态数据单一、相关性不足以及误差波动大的问题,实现方案:数据采集与预处理;构建跨用户警觉度监测模型;模型训练;用户警觉度监测。本发明使用源域与目标域特征,计算子空间距离、碱基错配惩罚与均方根误差作为模型总损失,最小化总损失训练模型,使用模型监测用户得到警觉度值。本发明通过使用多模态数据融合以及基于子空间距离的迁移学习算法,提高了跨用户警觉度监测过程中的精度与稳定性,降低警觉度监测误差,用于人机交互、交通驾驶、航空飞行等领域中对用户进行实时警觉度连续监测。
-
公开(公告)号:CN118349702A
公开(公告)日:2024-07-16
申请号:CN202410529125.7
申请日:2024-04-29
Applicant: 西安电子科技大学
IPC: G06F16/783 , G06V20/40 , G06V10/82
Abstract: 本发明公开了一种基于多维度视频信息交互的视频时刻检索方法,主要解决现有技术难以提取视频中多样性定位内容导致跨模态对齐困难和检索不精确的问题。其实现方案为:使用公开的视频时刻检索数据集构建训练集;构建包括文本特征提取模块、视频特征提取模块、多维度二维时序特征图生成模块、场景分割候选时刻表示增强模块、跨模态交互和时刻检索模块的视频时刻检索网络;利用训练集通过梯度下降法对视频时刻检索网络进行训练;利用训练好的网络前向计算完成文本相对应的视频时刻的检索。本发明通过多维度视频信息交互,构建多维度二维时序特征图并增强特征表示,促进了跨模态语义匹配,提高了模型的检索性能,可用于智慧教育和安全监控。
-
公开(公告)号:CN118503384A
公开(公告)日:2024-08-16
申请号:CN202410692903.4
申请日:2024-05-31
Applicant: 西安电子科技大学
IPC: G06F16/332 , G06F16/583 , G06F18/25 , G06V10/80 , G06N3/0455 , G06N3/0464 , G06N3/08 , G06F18/22 , G06F18/241 , G06N5/04
Abstract: 本发明提出了一种基于细粒度对齐的单阶段医疗图像差异问答方法,实现步骤为:获取训练样本集和测试样本集;构建基于细粒度对齐的单阶段医疗图像差异问答模型并对其进行迭代训练;获取单阶段医疗图像差异问答结果。本发明构建了细粒度特征对齐模块,加强模型对图像文本粗粒度和细粒度特征感知,充分挖掘文本细粒度信息,并将文本细粒度信息与图像的细粒度信息对齐,实现了对多模态细粒度信息之间关系的建模,并构建了基于Transformer结构的单阶段医疗图像差异问答模型,保证了各个模块结构一致性,降低了多种模态特征在语义表征上的差距,有效提高了图像差异问答的准确度。
-
公开(公告)号:CN118192808A
公开(公告)日:2024-06-14
申请号:CN202410486925.5
申请日:2024-04-22
Applicant: 西安电子科技大学
IPC: G06F3/01 , G06F18/241 , G06N3/0464 , G06N3/045 , G06N3/094 , G06N3/096 , G06N3/084 , G06F18/25 , G06F18/213
Abstract: 本发明公开了一种基于多源对抗与特征纯化的跨用户肌电手势识别方法,主要解决现有技术中跨用户肌电手势识别方法复杂度高、识别性能低以及稳定性差的问题。其实现方案是:从公开网站获取表面肌电信号数据,对其进行预处理并划分训练集、校准集及测试集;利用训练集构建域不变特征学习模块,分别建立域特异特征学习模块、特征融合模块及分类模块;将域不变特征学习模块与域特异特征学习模块并联后再与特征融合模块、分类模块级联,构成跨用户肌电手势识别迁移模型,并利用校准集对其训练;将测试集输入到训练好的跨用户肌电手势识别迁移模型得到手势识别结果。本发明识别复杂度低、精度高,稳定性好,可用于人机交互、健康监测与康复以及智能辅助设备控制。
-
公开(公告)号:CN118885072A
公开(公告)日:2024-11-01
申请号:CN202411018885.8
申请日:2024-07-29
Applicant: 西安电子科技大学
Inventor: 万波 , 黄嘉阳 , 熊帮 , 李奉奇 , 李昕泰 , 杨鹏飞 , 刘锦辉 , 赵辉 , 罗楠 , 王笛 , 王义峰 , 刘刚 , 王泉 , 潘蓉 , 李少峰 , 钟昊迪 , 韩磊
IPC: G06F3/01 , G06N3/042 , G06N3/0464 , G06F18/10 , G06N3/047 , G06F18/241 , G06F18/213 , G06F18/25
Abstract: 本发明提出了一种结合集成DCPM和GCN的运动想象识别方法,解决了现有技术中信号信噪比低,特征提取复杂度高,识别时间窗长的问题,实现步骤为:MI脑电信号预处理;计算DSP空间滤波器;集成DSP,形成EDSP空间滤波器,对MI特征域整体表达;接力计算,刻画MI信号在不同特征域的交叉性空间关系;GCN分类识别MI信号。本发明将每组得到的DSP空间滤波器集成,简化了数据处理的过程,通过结合EDSP空间滤波器接力计算邻接矩阵和图拉普拉斯算子,丰富了滤波后信号的特征,充实了邻接矩阵对节点信息的刻画,在短时间窗的情况下也保证了较高的识别准确率,提高了MI‑BCI系统中的识别效率,可应用在机器人控制等人机交互场景中。
-
公开(公告)号:CN118865476A
公开(公告)日:2024-10-29
申请号:CN202411072035.6
申请日:2024-08-06
Applicant: 西安电子科技大学
IPC: G06V40/18 , G06V40/16 , G06V10/80 , G06V10/764 , G06V10/44 , G06V10/82 , G06N3/0464 , G06N3/08
Abstract: 本发明公开了一种基于远眼的双视角注视估计方法及系统,包括以下步骤;步骤1:获取双视角人脸图像,并对图像进行预处理,得到双视角注视估计数据集;步骤2:对双视角人脸和远眼图像进行特征提取;步骤3:构建双视角注视估计模型,输入双视角人脸和眼睛特征图估计视线方向;步骤4:利用所述双视角注视估计数据集对所述双视角注视估计模型进行训练;步骤5:使用训练完成双视角注视估计模型进行注视估计。本发明视线估计精度较高,达到了目前最好的估计精度,且首次发现了在双视场景下仅使用远眼图像的效果优于使用双眼图像。
-
公开(公告)号:CN118447993A
公开(公告)日:2024-08-06
申请号:CN202410645444.4
申请日:2024-05-23
Applicant: 西安电子科技大学
Abstract: 本发明提出了一种基于状态信息分离知识图谱增强的胸部X光影像报告生成方法,实现步骤为:获取训练和测试样本集;构建基于状态信息分离知识图谱增强的胸部X光影像报告生成网络模型并对其进行迭代训练;获取胸部X光影像报告生成结果。本发明在对胸部X光影像报告生成网络模型进行训练和胸部X光影像报告生成结果的过程中,分离子图生成模块通过三元组构建异常子图和正常子图,利用两个状态信息分离的子图分别学习异常信息和正常信息内部的关系,避免了现有技术因不同状态信息混杂导致的相互干扰,减小了模型需要学习知识与生成的报告之间的差异,从而提高了生成报告的准确性。
-
-
-
-
-
-