公开(公告)号：CN120071074A

公开(公告)日：2025-05-30

申请号：CN202411941584.2

申请日：2024-12-26

Applicant: 北京工业大学

Inventor： 王瑾 ,  陈家德 ,  孙学强 ,  侯屹林 ,  高洪鹏

IPC: G06V10/82 ,  G06V10/40 ,  G06V10/80 ,  G06V20/64 ,  G06N3/0464 ,  G06N3/045 ,  G06N3/042 ,  G06N3/096 ,  G06N3/084 ,  G06N3/0985

Abstract: 本发明提供了一种多视角深度图引导的跨模态蒸馏点云上采样方法，包括跨模态特征提取模块和细节估计的蒸馏结构；为了提取稀疏点云充分的跨模态表征，提出了一种双分支的跨模态特征提取模块，分别提取点云特征和多视角深度图特征；为了更好的融合这两种模态的特征，设计了多视角深度图到点特征融合模块，作用在特征提取模块的不同层，以细粒度的方式将像素特征融合到每个点特征当中；为利用稠密点云深度图的细节信息，构建蒸馏结构：教师网络输入稠密点云深度图并提取多层次细节表征，学生网络在教师网络引导下仅利用稀疏点云深度图预测这些表征，提升重建质量；基于目标数值优化初始点云上采样网络，得到点云上采样网络。

公开(公告)号：CN117974818A

公开(公告)日：2024-05-03

申请号：CN202410194374.5

申请日：2024-02-21

Applicant: 北京工业大学

Inventor： 王瑾 ,  孙学强 ,  陈家德

IPC: G06T9/40 ,  G06T9/00 ,  G06N3/0464 ,  G06N3/0455 ,  G06N3/084 ,  G06V10/80

Abstract: 一种基于空间通道混合上下文模型的点云几何压缩方法属于点云压缩技术领域。本发明设计基于稀疏卷积的特征变换模块，该模块结合稀疏卷积与残差结构用于对特征聚集并增强以提升重建点云质量；为利用空间相关性准确估计概率，本发明设计了空间频率分解模块，该模块将点云划分为多个空间频率分量并建立由低频到高频的空间依赖，实现码率消耗权衡；此外，为联合利用通道间相关性，本发明设计了分组通道上下文模块，该模块基于通道熵对特征通道进行分组，并将基于空间依赖构建的上下文模型嵌入每个通道组中实现码率显著节省。构成点云几何压缩网络，通过率失真损失不断优化以实现高效编码。

公开(公告)号：CN116934962A

公开(公告)日：2023-10-24

申请号：CN202310821544.3

申请日：2023-07-06

Applicant: 北京工业大学

Inventor： 王瑾 ,  陈家德 ,  孙学强 ,  孙龙华 ,  王丹

IPC: G06T17/00 ,  G06T5/00 ,  G06N3/0464 ,  G06N3/047 ,  G06N3/048 ,  G06N3/08

Abstract: 本发明提供了一种基于深度学习的点云上采样方法，包括：频率感知的注意力模块，该模块结合图滤波与通道注意力，用于突出高频点的特征；为了更好的保持几何结构与局部细节，本发明设计了集合内与集合间特征聚合模块和结构感知的特征变换模块；一方面通过聚合集合内与集合间特征用来创建每个点完整的局部表示；另一方面结构感知的特征变换模块通过捕获全局几何结构和精细局部细节来提高扩展点特征的质量；此外，为了提高粗输稠密点云的质量，本发明设计了多尺度空间修正单元，该单元利用了注意力特征融合和多尺度注意力；基于目标数值优化初始点云上采样网络，得到点云上采样网络。