公开(公告)号：CN118762132B

公开(公告)日：2024-12-10

申请号：CN202411245377.3

申请日：2024-09-05

Applicant: 中国科学院自动化研究所

Inventor： 黄怀波 ,  曹杰 ,  赫然 ,  王宏博 ,  刘进 ,  周晓强

IPC: G06T17/00 ,  G06T15/00 ,  G06T15/20 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/0475

Abstract: 本公开提供了一种基于视角一致性增强的三维数据生成方法及系统。基于视角一致性增强的三维数据生成方法包括：获取三维数据生成模型输出的三维数据，作为目标三维数据；基于所述目标三维数据，渲染出与多个视角一一对应的多个原始二维视图；将至少一个原始二维视图和查询提示信息，输入多模态模型，得到所述多模态模型输出的查询结果；针对所述查询结果，对所述至少一个原始二维视图进行修正，得到至少一个修正后二维视图；基于所述至少一个原始二维视图和所述至少一个修正后二维视图，计算第一损失函数，并基于所述第一损失函数更新所述三维数据生成模型的模型参数；获取更新后的三维数据生成模型输出的三维数据。

公开(公告)号：CN118762132A

公开(公告)日：2024-10-11

申请号：CN202411245377.3

申请日：2024-09-05

Applicant: 中国科学院自动化研究所

Inventor： 黄怀波 ,  曹杰 ,  赫然 ,  王宏博 ,  刘进 ,  周晓强

IPC: G06T17/00 ,  G06T15/00 ,  G06T15/20 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/0475

Abstract: 本公开提供了一种基于视角一致性增强的三维数据生成方法及系统。基于视角一致性增强的三维数据生成方法包括：获取三维数据生成模型输出的三维数据，作为目标三维数据；基于所述目标三维数据，渲染出与多个视角一一对应的多个原始二维视图；将至少一个原始二维视图和查询提示信息，输入多模态模型，得到所述多模态模型输出的查询结果；针对所述查询结果，对所述至少一个原始二维视图进行修正，得到至少一个修正后二维视图；基于所述至少一个原始二维视图和所述至少一个修正后二维视图，计算第一损失函数，并基于所述第一损失函数更新所述三维数据生成模型的模型参数；获取更新后的三维数据生成模型输出的三维数据。