一种基于高斯泼溅的细节层次渲染方法

    公开(公告)号:CN119579757A

    公开(公告)日:2025-03-07

    申请号:CN202411446033.9

    申请日:2024-10-16

    Abstract: 本发明公开了一种基于高斯泼溅的细节层次渲染方法,能够通过用户在实际在交互过程中的需要,动态改变模型的细节层次,实现高逼真、低资源损耗的基于高斯泼溅的渲染,降低渲染所需的损耗。本发明的技术方案包括准备阶段和实时渲染阶段。准备阶段,获取多视角图像,并根据多视角图像构建相应的三维模型或者四维模型,生成具有不同细节层次的高斯泼溅模型。实时渲染阶段,利用不同细节层次的高斯泼溅模型,根据用户的实时数据选择不同细节层次的高斯泼溅模型进行实时渲染。

    一种远程交互系统及方法

    公开(公告)号:CN112198957A

    公开(公告)日:2021-01-08

    申请号:CN202010884800.X

    申请日:2020-08-28

    Abstract: 本发明公开了一种远程交互系统及方法,属于增强现实与虚拟现实技术领域。提供更加友好的交互方式,更具浸入式交互体验。实体机器人通过摄像设备采集得到本地场景视频和音频,通过本地计算端发送至远程端;实体机器人在本地计算端控制下模拟远程端用户的移动以及动作。远程计算端与本地计算端通信,远程计算端一方面获取本地场景视频进行虚拟现实显示;另一方面控制动作捕捉设备获取远程端用户的移动信息以及动作信息,发送至本地计算端;同时远程计算端还获取远程端用户的语发送至本地计算端。本地计算端在实体机器人位置处渲染对应远程端用户的虚拟化身、播放用户实时音频;本地端用户通过增强现实设备与远程端用户的虚拟化身进行交互。

    一种文本输入方法和系统

    公开(公告)号:CN114047872B

    公开(公告)日:2024-07-23

    申请号:CN202111183508.6

    申请日:2021-10-11

    Abstract: 本发明公开了一种文本输入方法和系统,能够结合手势和环形字符输入界面,降低用户输入记忆负担,提高了用户公共场所使用接受度,且输入高效准确。具体方案包括:开始信号和结束信号检测设备实时检测接收触发信号送入计算设备。用户手势检测设备检测接收识别用户的输入手势送入计算设备。显示设备用于显示CGR环境,包括虚拟字符界面、文本输入界面以及虚拟环境;计算设备中设有如下模块:用户手势识别器用于对输入手势进行识别;开始信号和结束信号识别器用于对触发信号进行识别;文本输入控制器根据输入手势的识别结果,通过预测算法预测用户输入的备选字符、输入字符以及候选词单词列表,控制显示器中显示文本输入界面和虚拟字符界面。

    一种高仿真机器人面部表情控制方法

    公开(公告)号:CN115457170A

    公开(公告)日:2022-12-09

    申请号:CN202210952819.2

    申请日:2022-08-09

    Abstract: 本发明涉及机器人控制算法技术领域,特别是涉及一种高仿真机器人面部表情控制方法。所述高仿真机器人面部表情控制方法包括采集用户照片,生成高仿真机器人不同的面部表情,得到高仿真机器人的面部表情‑全视角图像序列‑舵机转动角度,使用深度神经网络对用户照片和高仿真机器人的面部表情‑全视角图像序列进行训练,得到用户‑高仿真机器人训练模型,利用训练后的用户‑高仿真机器人训练模型和高仿真机器人的面部表情‑舵机转动角度,实时将用户的面部表情序列输出并驱动高仿真机器人。本发明增加了仿真机器人表情驱动的泛用性,解决了高仿真机器人面部表情难以迅速调节并控制的现象,而且普适度高,适用于多种不同的高仿真机器人面部控制。

    一种文本输入方法和系统

    公开(公告)号:CN114047872A

    公开(公告)日:2022-02-15

    申请号:CN202111183508.6

    申请日:2021-10-11

    Abstract: 本发明公开了一种文本输入方法和系统,能够结合手势和环形字符输入界面,降低用户输入记忆负担,提高了用户公共场所使用接受度,且输入高效准确。具体方案包括:开始信号和结束信号检测设备实时检测接收触发信号送入计算设备。用户手势检测设备检测接收识别用户的输入手势送入计算设备。显示设备用于显示CGR环境,包括虚拟字符界面、文本输入界面以及虚拟环境;计算设备中设有如下模块:用户手势识别器用于对输入手势进行识别;开始信号和结束信号识别器用于对触发信号进行识别;文本输入控制器根据输入手势的识别结果,通过预测算法预测用户输入的备选字符、输入字符以及候选词单词列表,控制显示器中显示文本输入界面和虚拟字符界面。

    一种基于高斯泼溅的多细节层次训练方法

    公开(公告)号:CN119579758A

    公开(公告)日:2025-03-07

    申请号:CN202411446212.2

    申请日:2024-10-16

    Abstract: 本发明公开了一种基于高斯泼溅的多细节层次训练方法,涉及虚拟现实、增强现实技术领域,在虚拟现实、增强现实等应用场景中,对于在视野范围内不同距离的目标,采用不同层级的高斯模型进行渲染,可实现场景中模型的渲染加速。首先对点云中点的数量进行分级,然后根据点云中点的数量,按照从小到大的顺序依次训练目标场景或者物体的高斯泼溅模型,分别作为不同层级的高斯泼溅模型。实际应用场景中,根据目标与观测者的距离远近,选择合适的层级进行渲染,以节省运算资源。

    一种用于数字人和实体的虚实融合方法及系统

    公开(公告)号:CN114299257A

    公开(公告)日:2022-04-08

    申请号:CN202111566360.4

    申请日:2021-12-20

    Abstract: 本发明公开了一种用于数字人和实体的虚实融合方法及系统,属于增强现实技术领域,该方案实现将数字人和实体机机械结构的虚实融合。首先对实体机械结构进行骨骼建模,确定实体机械结构各个关节的属性,将每个关节部位进行建模,形成实体机械结构的三维骨骼模型。将虚拟数字人形象进行骨骼重定向,骨骼重定向过程具体为:调整已有的虚拟数字人形象的骨骼的大小、方向,使重定向后的虚拟数字人形象和实体机械结构的三维骨骼模型相匹配。将实体机械结构与虚拟数字人形象叠加,控制虚拟数字人形象和实体机械结构的各个关节对应位置,同时、同步地发生变化,实时判断虚拟数字人形象与实体机械结构的三维骨骼模型是否相匹配,若不匹配则实时调整。

    一种用于数字人和实体的虚实融合方法及系统

    公开(公告)号:CN114299257B

    公开(公告)日:2025-04-04

    申请号:CN202111566360.4

    申请日:2021-12-20

    Abstract: 本发明公开了一种用于数字人和实体的虚实融合方法及系统,属于增强现实技术领域,该方案实现将数字人和实体机机械结构的虚实融合。首先对实体机械结构进行骨骼建模,确定实体机械结构各个关节的属性,将每个关节部位进行建模,形成实体机械结构的三维骨骼模型。将虚拟数字人形象进行骨骼重定向,骨骼重定向过程具体为:调整已有的虚拟数字人形象的骨骼的大小、方向,使重定向后的虚拟数字人形象和实体机械结构的三维骨骼模型相匹配。将实体机械结构与虚拟数字人形象叠加,控制虚拟数字人形象和实体机械结构的各个关节对应位置,同时、同步地发生变化,实时判断虚拟数字人形象与实体机械结构的三维骨骼模型是否相匹配,若不匹配则实时调整。

    一种为虚拟物体提供实体交互的方法、系统及装置

    公开(公告)号:CN114415827B

    公开(公告)日:2024-10-08

    申请号:CN202111564482.X

    申请日:2021-12-20

    Abstract: 本发明公开了一种为虚拟物体提供实体交互的方法、系统及装置,能够本发明提出的技术能够实时为不同的虚拟物体提供实体反馈,通过使用移动装置自动组装基本体,构成虚拟物体对应的非预制实体,提供实体交互。一种为虚拟物体提供实体交互的方法包括如下步骤:根据用户所指定虚拟物体获取虚拟物体特征。基于虚拟物体特征计算虚拟物体的实体基本体组成信息。根据构成虚拟物体的虚拟基本体信息,控制装置将实体基本体进行实时搭建。根据终端设备虚拟场景和现实场景构建对应的虚拟场景,实现用户与虚拟物体的实体交互。本发明提出的方法可以实时为用户创建当前虚拟物体对应的物理实体模块,为虚拟物体提供可交互实体,提供丰富的触觉交互。

    一种用于虚拟现实的物体选择及虚拟抓握生成方法及系统

    公开(公告)号:CN116820228A

    公开(公告)日:2023-09-29

    申请号:CN202310542655.0

    申请日:2023-05-15

    Abstract: 本发明公开了一种用于虚拟现实的物体选择及虚拟抓握生成方法及系统,通过实时获取用户真实手部位姿,控制虚拟手的手部位姿,利用第一神经网络,的带用户手势所处抓握类型的概率;跟踪用户真实手腕位姿和虚拟环境中物体的位姿,计算场景中相关物体的相关概率,推理被选择虚拟物体;利用第二神经网络输出被选择物体在手腕坐标系下的位置以及旋转值;最后利用第三神经网络,输出优化的用户手部关节旋转值,调整虚拟手,实现虚拟手对虚拟物体的抓握。该系统基于人类常识进行开发,根据交互环境和用户手势进行推理,用户可以根据物体的形状及抓取真实物体的经验,即抓取真实物体时使用的手势,选择虚拟物体,用户无需进行培训就能快速使用。

Patent Agency Ranking