基于多源异构数据融合的三维场景分割域迁移方法及装置

    公开(公告)号:CN116246070A

    公开(公告)日:2023-06-09

    申请号:CN202310092486.5

    申请日:2023-01-29

    Applicant: 北京大学

    Abstract: 本公开涉及一种基于多源异构数据融合的三维场景分割域迁移方法及装置。所述方法包括:获取源域和目标域的多模态数据以及源域三维点云数据的分割标签,并提取多模态数据的特征;基于二维图像数据和三维点云数据的映射关系,将源域像素特征和目标域像素数据分别划分为具有映射关系的像素特征和不具有映射关系的像素特征;综合跨模态对比学习和监督学习对语义分割模型进行训练,得到训练后的语义分割模型;将目标域中的待分割三维点云数据输入所述训练后的语义分割模型,得到三维场景分割域迁移结果。本公开实现了语义分割模型从源域到目标域的迁移。

    凸面镜反射图像的生成、语义分割方法及装置

    公开(公告)号:CN116681708A

    公开(公告)日:2023-09-01

    申请号:CN202210167587.X

    申请日:2022-02-23

    Applicant: 北京大学

    Abstract: 本发明公开了一种凸面镜反射图像的生成、语义分割方法及装置,涉及凸面镜反射图像领域。所述生成方法包括:构建世界坐标系与相机坐标系,并基于凸面镜反射图像的姿态参数,建立世界坐标系与相机坐标系的关系;对置于所述相机坐标系的平面图像进行径向扭曲;将扭曲图像围绕世界坐标系的X轴与Y轴旋转,得到平面图像的凸面镜反射图像。本发明依靠建立的凸面镜模拟模块来模拟凸面镜成像,并通过对抗学习使得模拟的凸面镜图像和真实的图像在几何形态上接近,进而提升真实凸面镜反射图像的语义分割精度。

    复杂装备实体层级分布的四元数知识图谱链接预测方法

    公开(公告)号:CN115795043A

    公开(公告)日:2023-03-14

    申请号:CN202211235369.1

    申请日:2022-10-10

    Applicant: 北京大学

    Abstract: 本发明公开了一种复杂装备实体层级分布的四元数知识图谱链接预测方法,其步骤包括:1)对目标复杂装备的知识图谱中的实体和关系构建索引,并统计所述知识图谱中实体和关系的数量;2)构建具有层级感知的四元数知识图谱嵌入模型,其包括实体嵌入向量生成模块、关系嵌入向量生成模块;3)利用目标复杂装备知识图谱中的三元组和生成的负样本训练具有层级感知的四元数知识图谱嵌入模型;负样本由正样本随机替换掉头实体或尾实体来生成,并且替换后生成的负样本不存在于所有的正样本中;4)利用训练后的模型对目标复杂装备中待补全的三元组进行三元组链接预测。本发明能够有效学习知识图谱中的语义信息,在知识图谱补全任务中获得更好的精度。

    基于多源信息融合、热红外和三维深度图的目标检测方法

    公开(公告)号:CN115713679A

    公开(公告)日:2023-02-24

    申请号:CN202211254518.9

    申请日:2022-10-13

    Applicant: 北京大学

    Abstract: 本发明公开了一种基于多源信息融合、热红外和三维深度图的目标检测方法,其步骤包括:采用编码器‑解码器范式结构构建一SalienTR模型,其中编码器部分包含两个并行的Swin Transformer主干网络,分别用于提取所输入RGB图像的外观特征,以及所输入热红外图像或深度图像的空间结构特征;解码器部分包含跨模态融合模块和双流解码器,所述跨模态融合模块用于对所述外观特征、空间结构特征进行融合并输入所述双流解码器,所述双流解码器用于根据输入的融合特征和所述外观特征、空间结构特征输出包含预测显著性目标及其边缘轮廓的预测分割图;将待检测图像及其对应的热红外图或深度图输入训练后的模型中,输出预测分割图。

Patent Agency Ranking