一种基于头显双向监测的注视物体三维表达自动收集系统

    公开(公告)号:CN118279774A

    公开(公告)日:2024-07-02

    申请号:CN202410338718.5

    申请日:2024-03-25

    Abstract: 本发明提供一种基于头显双向监测的注视物体三维表达自动收集系统,通过头戴式显示器的用户注视检测,自动识别并采集环境中被注视的物体,生成并存储该物体的三维高斯神经表达,用于融合到其他真实或者虚拟的场景中;也就是说,本发明基于用户行为,智能判断并识别环境中的被关注物体,然后收集图像信息用于三维物体生成和存储,实现了用户注视物体的无感收集;由此可见,本发明提高了生成的虚实融合场景的丰富度和代入感,提高了用户体验和虚拟现实场景的交互性;在叙事融合场景中,用户熟悉的或者感兴趣的物体被自然的融合其中,增加了用户的亲切感,代入感和沉浸感,更有进行进一步交互的欲望。

    一种基于视素修正的语音驱动面部方法

    公开(公告)号:CN117079663A

    公开(公告)日:2023-11-17

    申请号:CN202310892014.8

    申请日:2023-07-20

    Abstract: 本发明公开了一种基于视素修正的语音驱动面部方法,一、采集人脸的语音—带标记的面部图像数据对;二、对所采集数据分别进行语音预处理、三维标记点预处理,得到可直接输入网络的训练数据;三、将训练数据输入神经网络进行训练,实现语音向面部三维标记点的映射;四、利用视素修正算法优化步骤三得到的三维标记点;本发明能实现由语音特征到面部三维标记点特征的精确映射,实现语音驱动三维面部标记点的功能。

    一种用于虚拟现实的物体选择及虚拟抓握生成方法及系统

    公开(公告)号:CN116820228A

    公开(公告)日:2023-09-29

    申请号:CN202310542655.0

    申请日:2023-05-15

    Abstract: 本发明公开了一种用于虚拟现实的物体选择及虚拟抓握生成方法及系统,通过实时获取用户真实手部位姿,控制虚拟手的手部位姿,利用第一神经网络,的带用户手势所处抓握类型的概率;跟踪用户真实手腕位姿和虚拟环境中物体的位姿,计算场景中相关物体的相关概率,推理被选择虚拟物体;利用第二神经网络输出被选择物体在手腕坐标系下的位置以及旋转值;最后利用第三神经网络,输出优化的用户手部关节旋转值,调整虚拟手,实现虚拟手对虚拟物体的抓握。该系统基于人类常识进行开发,根据交互环境和用户手势进行推理,用户可以根据物体的形状及抓取真实物体的经验,即抓取真实物体时使用的手势,选择虚拟物体,用户无需进行培训就能快速使用。

    一种远程交互系统及方法
    44.
    发明授权

    公开(公告)号:CN112198957B

    公开(公告)日:2022-08-26

    申请号:CN202010884800.X

    申请日:2020-08-28

    Abstract: 本发明公开了一种远程交互系统及方法,属于增强现实与虚拟现实技术领域。提供更加友好的交互方式,更具浸入式交互体验。实体机器人通过摄像设备采集得到本地场景视频和音频,通过本地计算端发送至远程端;实体机器人在本地计算端控制下模拟远程端用户的移动以及动作。远程计算端与本地计算端通信,远程计算端一方面获取本地场景视频进行虚拟现实显示;另一方面控制动作捕捉设备获取远程端用户的移动信息以及动作信息,发送至本地计算端;同时远程计算端还获取远程端用户的语发送至本地计算端。本地计算端在实体机器人位置处渲染对应远程端用户的虚拟化身、播放用户实时音频;本地端用户通过增强现实设备与远程端用户的虚拟化身进行交互。

    一种为虚拟物体提供实体交互的方法、系统及装置

    公开(公告)号:CN114415827A

    公开(公告)日:2022-04-29

    申请号:CN202111564482.X

    申请日:2021-12-20

    Abstract: 本发明公开了一种为虚拟物体提供实体交互的方法、系统及装置,能够本发明提出的技术能够实时为不同的虚拟物体提供实体反馈,通过使用移动装置自动组装基本体,构成虚拟物体对应的非预制实体,提供实体交互。一种为虚拟物体提供实体交互的方法包括如下步骤:根据用户所指定虚拟物体获取虚拟物体特征。基于虚拟物体特征计算虚拟物体的实体基本体组成信息。根据构成虚拟物体的虚拟基本体信息,控制装置将实体基本体进行实时搭建。根据终端设备虚拟场景和现实场景构建对应的虚拟场景,实现用户与虚拟物体的实体交互。本发明提出的方法可以实时为用户创建当前虚拟物体对应的物理实体模块,为虚拟物体提供可交互实体,提供丰富的触觉交互。

    基于主被动力反馈的虚拟宠物系统以及交互控制方法

    公开(公告)号:CN113181631A

    公开(公告)日:2021-07-30

    申请号:CN202110368871.9

    申请日:2021-04-06

    Abstract: 本发明公开了一种基于主被动力反馈的虚拟宠物系统以及交互控制方法,属于虚拟现实技术领域,该方案能够提高虚拟环境中三维虚拟宠物的真实感、交互多样性、交互效率。方案如下:计算设备通过通讯网络与交互意图检测设备、虚拟宠物实体模块和显示设备进行信息交互与控制。交互意图检测设备用于检测用户与虚拟宠物的交互动作,计算设备根据交互动作确定交互意图。虚拟宠物实体设备包括宠物实体和宠物实体控制设备;宠物实体控制设备用于根据宠物实体控制指令控制实体模块的运动,为虚拟宠物提供主被动力反馈。显示设备用于显示虚拟环境,其中包括用户化身和虚拟宠物化身。虚拟宠物化身接收计算设备发来的宠物动作触发信号,作出相应的宠物动作。

    一种键盘布局自适应输入系统

    公开(公告)号:CN110134252B

    公开(公告)日:2021-07-09

    申请号:CN201910250451.3

    申请日:2019-03-29

    Abstract: 本发明公开了一种键盘布局自适应输入系统,属于输入系统技术领域。该系统包括输入设备、键盘模块以及算法模块。输入设备接收外部触摸输入,调用键盘模块将外部触摸输入转换为输入键值以实现输入。键盘模块包含键盘;调用算法模块,获得实时解算的预测键值以及键帽面积变化值,依据键帽面积变化值实时改变键盘中的相应键值的键帽面积;获取外部触摸输入,以外部触摸输入在键盘上对应键值作为输入键值。算法模块用于实时运行输入字符预测算法以及键盘键值键帽面积变化算法。该系统能够降低用户输入错误率,特别是相邻值输入错误,并防止用户产生认知误差,进一步提高输入效率。

    一种用于虚拟现实的目标选择方法及系统

    公开(公告)号:CN112068757A

    公开(公告)日:2020-12-11

    申请号:CN202010765946.2

    申请日:2020-08-03

    Abstract: 本发明公开了用于虚拟现实的目标选择方法及系统,涉及虚拟现实、增强现实以及混合现实技术领域,本发明能够帮助用户在虚拟环境中进行目标物体的选择,特别是远、小、密集物体的选择,提高物体选择速度、正确率,提高用户使用舒适度。本发明包括如下步骤:采用设定设备在虚拟环境中发出指向目标区域的虚拟射线。获取用户手部指定部位在设定触摸区域内的滑动动作,并将滑动动作由触摸区域映射至目标区域,作为虚拟射线的滑动轨迹。在目标区域中,选取与虚拟射线的滑动轨迹具有交叉的物体作为所选目标物体。

    一种基于激光管的VR头盔的移动延迟测量方法

    公开(公告)号:CN109752097B

    公开(公告)日:2020-08-11

    申请号:CN201811636604.X

    申请日:2018-12-29

    Inventor: 翁冬冬 荀航 胡翔

    Abstract: 本发明公开了一种基于激光管的VR头盔的移动延迟测量方法,采用导轨带动VR头盔运动,在导轨一侧设置激光管,并对激光管进行编码;通过光敏传感器获得激光管的光信号,VR头盔运动过程中解算各个激光管位置处的自身位置;VR头盔再次运动时,在激光管位置处给VR头盔输入对应的黑白图像,并用光敏传感器感知黑白图像;根据激光管编码获得的方波曲线以及光敏传感器感知黑白图像时输出的方波曲线,即可获得VR头盔的延迟时间;该方法使得VR头盔中的黑白图样与VR头盔的激光管编码能够进行虚实配准,不再有早期方法中手动对齐波形带来的误差;通过往返多次测量以及线性拟合的方式,极大的增加了测试数据样本,使得数据的期望更接近于真实的延迟时间。

    一种基于空间定位以及手指点击的输入系统

    公开(公告)号:CN110780732A

    公开(公告)日:2020-02-11

    申请号:CN201910842233.9

    申请日:2019-09-06

    Abstract: 本发明公开了一种基于空间定位以及手指点击的输入系统,属于虚拟现实技术领域,能在进行有效的文字输入的同时,又能保证输入的准确性和便捷性。该系统包括触碰检测模块、手部空间定位模块、数据处理模块以及显示模块。触碰检测模块用于检测用户手指的触碰动作数据。手部空间定位模块用于检测用户手部空间位置数据。数据处理模块获取用户手指的触碰动作数据以及用户手部空间位置数据,根据预先设定的用户手指的触碰动作数据和、或用户手部空间位置数据与输入字符的对应关系确定输入字符。显示模块用于接收输入字符,采用设定的输入法生成输入结果图像,并将输入结果图像渲染在虚拟环境中进行显示。

Patent Agency Ranking