公开(公告)号：CN118377373A

公开(公告)日：2024-07-23

申请号：CN202410409390.1

申请日：2024-04-07

Applicant: 武汉科技大学

Inventor： 杨明轩 ,  伍世虔

IPC: G06F3/01 ,  G06V40/18 ,  G06V40/20

Abstract: 本申请涉及混合现实技术领域，具体公开了一种基于MR设备的手眼协调计算机操控系统及方法，操控系统包括凝视估计系统和手姿势识别系统：凝视估计系统使用MR设备对内人眼相机采集的人眼图像信息，基于瞳孔检测方案检测瞳孔，结合MR设备对外场景相机采集的场景图像信息，使用眼动校准方案进行校准后得到场景相机下的可能凝视点，映射到计算机屏幕上得到系统操控位置；手姿势识别系统使用MR设备对外场景相机采集手部图像信息，基于手姿势及手部运动检测方案获取计算机系统操控指令，结合系统操控位置对计算机实现鼠标及键盘的操控动作。本申请提出的操控方案替代传统键盘鼠标在MR设备上实现了一种基于人体感官的更自然、更智能的多模态系统操控方式。

公开(公告)号：CN222882918U

公开(公告)日：2025-05-16

申请号：CN202520563696.2

申请日：2025-03-28

Applicant: 武汉科技大学

Inventor： 谷东霖 ,  王翔跃 ,  杨锐 ,  伍世虔 ,  杨明轩

IPC: G02B27/01

Abstract: 本实用新型公开了一种AR可穿戴设备，包括：镜框主体、可拆卸前景相机模组、瞳孔检测模组以及通讯模块；所述镜框主体内置瞳孔检测模组，所述镜框主体正前方配置有相机装配卡槽，所述相机装配卡槽用于配置所述可拆卸前景相机模组，所述镜框主体前方下方配置有可插拔鼻托结构；所述瞳孔检测模组包含至少一个瞳孔摄像头，所述瞳孔摄像头用于用户瞳孔信息检测；所述可拆卸前景相机模组用于扩大捕捉场景信息；所述通讯模块内置于所述镜框主体的镜腿内，与所述可拆卸前景相机模组、所述瞳孔检测模组电连接，通讯模块配备有主处理器板和WiFi模块，实现多用途、高适配性和舒适性的高度集成，提升了AR可穿戴设备的集成度和高适配性。