公开(公告)号：CN119781621A

公开(公告)日：2025-04-08

申请号：CN202411924599.8

申请日：2024-12-25

Applicant: 东南大学

Inventor： 周小舟 ,  朱隽宇 ,  郭心浩 ,  王柏捷

IPC: G06F3/01 ,  G06F3/0481 ,  G06F3/0484 ,  G06F3/04883 ,  G06V40/18 ,  G06V40/20

Abstract: 本发明涉及一种虚拟现实人机界面交互任务量化评估系统及方法，包括：交互信息采集，对虚拟环境中多模态交互流程中动作阶段的操作进行信息采集，获得操作集合；交互信息处理，将操作集合转化为时序的动作操作符序列，按匹配规则对其添加通用操作符，赋予通用操作符时间值并根据并行时间计算规则删除冗余操作符，得到表示最优交互流程的最优操作符序列；交互时间计算估计，赋予最优操作符序列中所有动作操作符时间值或时间函数，获得本次多模态交互流程的估计时间；交互结果输出，显示最优操作符序列及与其对应的交互流程；基于所述估计时间进行效率评估并显示评估结果。本发明实现了对多模态人机交互效率的科学评估。

公开(公告)号：CN116820233A

公开(公告)日：2023-09-29

申请号：CN202310640334.4

申请日：2023-06-01

Applicant: 东南大学

Inventor： 周小舟 ,  蒋厚泽 ,  朱隽宇 ,  韩己臣 ,  宗承龙

IPC: G06F3/01 ,  G06N3/0442 ,  G06N3/084

Abstract: 本发明公开了一种虚拟现实中基于手眼数据进行指向预测的方法，涉及计算机技术领域，解决了基于手眼数据的交互目标预测准确性不高的技术问题，其技术方案要点是通过手、眼双模态数据在指向运动中的规律性，提出了手眼协同运动模型，并基于该手眼协同运动模型进行交互意图判断。该方法可以提升交互目标进行预测的准确性和时效性，为机器更好地理解用户的操作，并做出及时的反馈提供了技术基础。