公开(公告)号：CN116958367A

公开(公告)日：2023-10-27

申请号：CN202310759183.4

申请日：2023-06-26

Applicant: 浙江大学

Inventor： 高新宇 ,  杨子逸 ,  赵云路 ,  金小刚

IPC: G06T15/00 ,  G06V10/764 ,  G06V10/774 ,  G06V10/82 ,  G06N3/04 ,  G06N3/09

Abstract: 本发明公开了一种快速组合并渲染复杂神经场景的方法，包括：根据收集的多个物体的不同视角下的2D图像，训练每个物体对应的神经辐射场模型以及神经辐射场模型相对应的神经深度场模型，准备数字资源；根据当前场景包含的每一个物体所对应的神经辐射场模型和神经深度场模型快速渲染组合的虚拟场景的结果。本发明采用神经辐射场模型和创新性的神经深度场模型相结合，支持在神经场景中进行点光源和平行光的动态阴影的投射。使用本方法，用户可以实现渐进式的物体插入和交互级速度的物体操作功能，从而为目标虚拟场景提供快速的结果预览，辅助神经场景的构建。

公开(公告)号：CN117934688A

公开(公告)日：2024-04-26

申请号：CN202410267590.8

申请日：2024-03-08

Applicant: 浙江大学

Inventor： 高新宇 ,  杨子逸 ,  金小刚

IPC: G06T15/00 ,  G06T15/04 ,  G06V10/762 ,  G06T7/80 ,  G06T17/00

Abstract: 本发明公开了一种基于高斯泼溅样例的神经表示建模方法，属于神经渲染和建模技术领域，包括：获取真实物体样例所在场景的2D图像及对应的相机位姿，根据高斯抛雪球方法得到高斯泼溅模型；构建基于高斯泼溅的渲染系统，从高斯泼溅模型中分割出包含物体样例的高斯泼溅表示，拼凑成有语义的高斯泼溅组合；指定高斯泼溅组合中的目标域和源域，利用源域的纹理特征风格对目标域进行基于采样的纹理传播，并保留目标域原有的纹理内容，同时，根据源域的整体特征对目标域进行基于特征聚类的纹理和谐，实现高斯泼溅组合的无缝衔接。本发明提供了一个基于高斯泼溅的渲染系统，用于创建逼真的3D模型，为直接从现实世界进行基于示例的建模提供了一个新的途径。