公开(公告)号：CN116382481A

公开(公告)日：2023-07-04

申请号：CN202310361579.3

申请日：2023-04-06

Applicant: 东南大学

Inventor： 仲雪飞 ,  葛勇 ,  李昱昂 ,  张雄 ,  樊兆雯

IPC: G06F3/01 ,  A61B5/378 ,  A61B5/374

Abstract: 本发明公开了一种基于脑机接口技术的人机交互眼镜。该人机交互眼镜包括交互眼镜主体，脑电信号分析模块，受控模块。其中，交互眼镜主体，包含刺激模块与脑电信号采集模块。本发明通过刺激模块提供不同频率的刺激，利用脑电信号分析模块来分析脑电信号采集模块收集的多通路脑电信号中的特征信息，进行注视点相对于刺激坐标系的二维坐标信息的定位，并将其转换为控制指令传输至相应的受控端执行，以视觉形式反馈信息给用户。本发明将刺激模块转换至可穿戴设备上，提升了SSVEP‑BCI系统的简单，方便与便携性，并且采用空间编码的方式，缓解了用户视觉上的不舒适感，更加贴合用户日常生活中的人机交互习惯。

公开(公告)号：CN116360600A

公开(公告)日：2023-06-30

申请号：CN202310357637.5

申请日：2023-04-06

Applicant: 东南大学

Inventor： 仲雪飞 ,  李昱昂 ,  葛勇 ,  张雄 ,  樊兆雯

IPC: G06F3/01 ,  A61B5/369 ,  A61B5/378

Abstract: 本发明公开了一种基于稳态视觉诱发电位的空间定位系统。该系统中的刺激模块利用四个闪烁阵列的空间编码策略，诱发的SSVEP信号经脑电信号采集模块放大采集后进行信号预处理，接着利用各个刺激频率分量的幅度，相位，相关系数及其各编码刺激频率或相位对应的相关系数之比作为特征信息来解码空间信息以确定视线注视的坐标，最后将坐标信息转换为指令传给受控操作模块，以实现视觉反馈。本发明能够有效解决现有空间编码中划分区域面积和分区的目标数目有限且无法分辨各个分区的边缘信息的问题，实现了视觉负荷低并能在屏幕中精准定位的BCI，为实现高集成的嵌入式BCI系统提供了可能性。

公开(公告)号：CN111898407B

公开(公告)日：2022-03-29

申请号：CN202010508604.2

申请日：2020-06-06

Applicant: 东南大学

Inventor： 李昱昂 ,  梁星辰 ,  张聪昱 ,  张雄 ,  樊兆雯

IPC: G06V40/16 ,  G06F3/04847 ,  G06F3/16

Abstract: 本发明属于人机交互领域，尤其是一种基于人脸动作识别的人机交互操作系统。首先通过摄像头实时采集视频，对每帧图像进行镜像翻转等预处理；采用分类器，检测人脸区域，并在人脸所在矩形区域内检测人眼、嘴等特征区域，同时提取人脸特征点，进行人脸身份认证并计算面部运动方向和瞬时速度；其次通过预设阈值采用帧间差分法分别检测人脸前后移动、眼部、嘴部等面部动作；最后依据检测得到的各区域位置参数及动作完成系统、应用和通用三类模式下对应的鼠标移动、点击、滚轮操控，触控功能控和模拟键盘组合快捷键，并能通过简单动作实现不同应用模式之间进的切换，实现代替传统的鼠标和键盘、触摸等手动操纵方式，实现无接触人机交互功能。

公开(公告)号：CN111898407A

公开(公告)日：2020-11-06

申请号：CN202010508604.2

申请日：2020-06-06

Applicant: 东南大学

Inventor： 李昱昂 ,  梁星辰 ,  张聪昱 ,  张雄 ,  樊兆雯

IPC: G06K9/00 ,  G06F3/0484 ,  G06F3/16

Abstract: 本发明属于人机交互领域，尤其是一种基于人脸动作识别的人机交互操作系统。首先通过摄像头实时采集视频，对每帧图像进行镜像翻转等预处理；采用分类器，检测人脸区域，并在人脸所在矩形区域内检测人眼、嘴等特征区域，同时提取人脸特征点，进行人脸身份认证并计算面部运动方向和瞬时速度；其次通过预设阈值采用帧间差分法分别检测人脸前后移动、眼部、嘴部等面部动作；最后依据检测得到的各区域位置参数及动作完成系统、应用和通用三类模式下对应的鼠标移动、点击、滚轮操控，触控功能控和模拟键盘组合快捷键，并能通过简单动作实现不同应用模式之间进的切换，实现代替传统的鼠标和键盘、触摸等手动操纵方式，实现无接触人机交互功能。