公开(公告)号：CN119579744A

公开(公告)日：2025-03-07

申请号：CN202411810801.4

申请日：2024-12-10

Applicant: 东南大学

Inventor： 路小波 ,  赵子瑜 ,  周思帆

IPC: G06T13/60 ,  G06T17/00 ,  G06N3/045 ,  G06N3/0464 ,  G06N3/048

Abstract: 本发明公开了一种基于双分支物理知识嵌入的烟雾场景三维重建方法及系统，首先收集数据，计算各个观测视角下的流体感知参数，并计算各个像素的状态估计值，以状态估计值作为先验监督，预训练状态估计模块，以此来区分烟雾场景中的动态对象和静态对象；将静态对象送到静态分支，动态对象送到动态分支分别处理，估计静态对象的体积密度和外观颜色、估计动态对象的体积密度、外观颜色及速度场；利用流体求解模块更新动态对象的速度场及体积密度；对静态分支和动态分支的输出结果分别渲染并合成渲染，利用多视角的图像信息和物理知识先验作为监督约束，对模块参数不断迭代优化，最终重建出高保真的三维动态烟雾场景，并支持场景中任意视角的图像生成。

公开(公告)号：CN119942282A

公开(公告)日：2025-05-06

申请号：CN202510010393.2

申请日：2025-01-03

Applicant: 东南大学

Inventor： 路小波 ,  赵子瑜 ,  周思帆

IPC: G06V10/80 ,  G06V10/44 ,  G06V10/54 ,  G06V10/56 ,  G06V10/82 ,  G06N3/0455 ,  G06N3/0464

Abstract: 本发明公开了一种基于多源图像特征融合的稀疏采样场景新视图合成系统及方法，通过多源特征生成模块提取高维特征信息，通过特征聚合模块得到聚合特征信息，利用特征映射模块，将观测视角的聚合特征信息投影变换到目标新视角，得到目标新视角下的聚合特征信息；再依次经过外观‑密度估计网络和占用估计网络，获取目标新视角下的颜色外观信息和密度信息，最后经合成渲染模块，获取目标新视角下重建得到的可见光图像和深度图像；本发明方法利用目标新视角下的可见光图像和深度图像作为先验信息，建立混合感知约束，对多源特征生成模块、外观‑密度估计网络和占用估计网络的参数迭代优化，最终实现场景新视图合成，并支持生成场景中任意图像。