公开(公告)号：CN119960600A

公开(公告)日：2025-05-09

申请号：CN202510042969.3

申请日：2025-01-10

Applicant: 北京科技大学

Inventor： 潘姣 ,  蔡昂 ,  姚超 ,  王笑琨 ,  班晓娟

IPC: G06F3/01 ,  G06T19/00 ,  G06V40/20

Abstract: 本发明公开了一种基于视觉的虚拟现实场景下手笔交互系统，系统包括：手部三维重建模块、手笔交互映射模块和交互呈现模块；一种基于视觉的虚拟现实场景下手笔交互方法，方法包括：S1、通过视觉传感器获取用户视角的手部图像；S2、将手部图像输入到构建好的图神经网络中进行双手三维重建得到模型；S3、预先设定抓握姿势，通过识别实际姿势和预设姿势区别，区分各微小手势变化；S4、设计几种较易区分的微小手势，映射到绘画系统的各功能中，形成手笔交互绘画系统；本发明让用户直观地在虚拟环境中进行创作，无需借助额外硬件，有效降低认知负荷和操作门槛，配合视听反馈策略，为用户提供沉浸式的绘画体验。

公开(公告)号：CN119399370A

公开(公告)日：2025-02-07

申请号：CN202411486409.9

申请日：2024-10-23

Applicant: 北京科技大学

Inventor： 潘姣 ,  滕佳彤 ,  姚超 ,  王雨晨 ,  班晓娟

IPC: G06T17/00 ,  G06T7/593 ,  G06V10/764

Abstract: 本发明提供一种基于单目图像的浅浮雕三维重建方法，属于图像处理技术领域；利用数码相机采集浮雕图像，基于摄影测量方法生成包含3D坐标和RGB值的密集点云，建立包含单目图像及其语义，软边缘及深度标签的浅浮雕数据集。基于上述有标签数据训练软边缘强化的多任务神经网络框架，在该框架中同时提取单目图像中的语义，边缘和深度特征，通过多任务损失函数和边缘对比模块将语义和边缘特征作为深度估计任务的有效线索，增强模型对细节部分的深度估计能力提升三维重建的精度。本发明能够直接从一张单目浮雕照片中提取对应的软边缘和语义信息，辅助深度估计任务，增强其对边缘区域细节的捕捉能力，有效提升后续浅浮雕三维重建的精度。