公开(公告)号：CN110930370B

公开(公告)日：2023-03-31

申请号：CN201911065268.2

申请日：2019-11-04

Applicant: 北京工业大学

Inventor： 孔徳慧 ,  虞义兰 ,  王少帆 ,  李敬华

IPC: G06T7/00

Abstract: 一种全景图像质量评估方法，通过将无压缩的全景图和对应压缩后的全景图经过scharr滤波器滤波后获得单个像素计算的视觉得分，通过多尺度融合来评估不同尺度下输入图像的质量，针对全景图的观看模式，采用尺度自适应方案，用注意力图机制v(t)控制是否使用注意力权重W(r)进行细节感知，可以模拟实现人眼观看全景图像的不同维度时会分配不同的注意力，以及人眼在观看图像时对全局和细节的特征把握，提高了模型客观评估结果与主观结果的一致性。

公开(公告)号：CN111402405A

公开(公告)日：2020-07-10

申请号：CN202010205875.0

申请日：2020-03-23

Applicant: 北京工业大学

Inventor： 孔德慧 ,  虞义兰 ,  王少帆 ,  李敬华 ,  王立春

IPC: G06T17/00 ,  G06T7/55 ,  G06N3/04

Abstract: 本发明涉及一种基于注意力机制的多视角图像三维重建方法，用于解决多视角重建时特征采样局限于规则格点，且融合时无法有效融合互补视角中的特征的问题。本发明分为编码层，重心约束距离的注意力聚合模块以及解码层，具体为：将含有N张图片的图像集通过编码层得到N个元素的深度特征集P；将该特征集输入重心约束距离的注意力聚合模块，输出融合特征y′，y′经解码层的反卷积运算即生成预测的三维模型Y′，通过最小化总的重建损失得到最接近真实三维模型(GT)的预测结果。本发明采用可变形卷积的思想，使用带有偏移量的卷积核进行卷积操作，实现动态自适应地调整卷积运算的感受野，具有提升特征提取质量的优点；同时，在注意力聚集模块里引入重心约束项，使聚集特征以重心距离约束的形式保持输入特征集中权重各异特征的权相关影响，平衡融合特征与各输入特征的偏差，从而得到更好的多视图融合特征，进一步提升模型重建结果。

公开(公告)号：CN110930370A

公开(公告)日：2020-03-27

申请号：CN201911065268.2

申请日：2019-11-04

Applicant: 北京工业大学

Inventor： 孔徳慧 ,  虞义兰 ,  王少帆 ,  李敬华

IPC: G06T7/00

Abstract: 一种全景图像质量评估方法，通过将无压缩的全景图和对应压缩后的全景图经过scharr滤波器滤波后获得单个像素计算的视觉得分，通过多尺度融合来评估不同尺度下输入图像的质量，针对全景图的观看模式，采用尺度自适应方案，用注意力图机制v(t)控制是否使用注意力权重W(r)进行细节感知，可以模拟实现人眼观看全景图像的不同维度时会分配不同的注意力，以及人眼在观看图像时对全局和细节的特征把握，提高了模型客观评估结果与主观结果的一致性。