公开(公告)号：CN112150608B

公开(公告)日：2024-07-23

申请号：CN202010929831.2

申请日：2020-09-07

Applicant: 鹏城实验室 ,  哈尔滨工业大学(深圳)

Inventor： 孟凡阳 ,  潘鸿鹄 ,  何震宇 ,  田第鸿 ,  柳伟

IPC: G06T17/00 ,  G06N3/042 ,  G06N3/0464 ,  G06N3/08

Abstract: 本申请公开了一种基于图卷积神经网络的三维人脸重建方法，所述方法包括获取待重建的人脸图像，确定所述人脸图像对应的若干人脸子区域；对于每个人脸子区域，获取该人脸子区域对应的人脸特征向量；基于经过训练的图卷积神经网络，确定该人脸特征向量对应的三维人脸结构信息；根据获取到所有三维人脸结构信息，确定所述人脸图像对应的三维人脸图像。本申请通过图卷积神经网络确定人脸图像对应的三维人脸结构信息，使得获取到的三维人脸结构信息中的每个点云数据均包括位置信息以及颜色信息，进而可以提高三维人脸图像的真实性。

公开(公告)号：CN116260969B

公开(公告)日：2023-08-18

申请号：CN202310537486.1

申请日：2023-05-15

Applicant: 鹏城实验室

Inventor： 孟凡阳 ,  丁润伟 ,  李超 ,  薛佳音 ,  谢小龙 ,  张钦宇

IPC: H04N19/134 ,  H04N19/60 ,  H04N19/42

Abstract: 本发明公开了一种自适应的通道渐进式编解码方法、装置、终端及介质，包括：将输入图像信号输入下采样粗粒度线性特征变换模块，并将得到的第一中间特征表示输入非线性特征变换模块进行广义的非线性处理；将得到的第二中间特征表示输入下采样细粒度线性特征变换模块，并将得到的潜在特征输入量化器进行压缩；将得到的整数表示输入无损编码模块进行转化，并通过无损解码模块还原为整数潜在特征表示；将整数潜在特征表示输入上采样粗粒度线性特征变换模块进行部分特征恢复，并将得到的特征图经过所述非线性特征变换模块及上采样细粒度线性特征变换模块，得到所述输入图像信号对应的重建图像。本发明实现通道渐进式编解码，以适用不同带宽。

公开(公告)号：CN115623207B

公开(公告)日：2023-03-10

申请号：CN202211603074.5

申请日：2022-12-14

Applicant: 鹏城实验室

Inventor： 丁润伟 ,  孟凡阳 ,  鲍有能 ,  张轶群 ,  张钦宇

IPC: H04N19/124 ,  H04N19/149 ,  H04N19/30 ,  H04N19/42 ,  H04B7/0413

Abstract: 本发明公开了一种基于多进多出技术的数据传输方法及相关设备，所述方法包括：获取M张待压缩图像，分别输入到编码网络中的M个输入层后分别经过所述编码网络中M个待量化特征层后变换为M个待量化特征；将M个待量化特征输入至M个量化单元，M个量化单元分别对M个待量化特征进行压缩量化得到M个整数；将M个整数通过M个无损编码模块分别进行无损编码后得到M个二进制码流，并将M个二进制码流分别输入至M个无损解码模块进行解码；将解码还原得到的M个整数输入至解码网络的M个待解码层，M个待解码层将M个整数变换为M个解码图像，并输出M个解码图像。本发明提高了神经网络对图像进行编解码的效率。

公开(公告)号：CN112446431A

公开(公告)日：2021-03-05

申请号：CN202011368267.8

申请日：2020-11-27

Applicant: 鹏城实验室 ,  哈尔滨工业大学(深圳)

Inventor： 孟凡阳 ,  尹建华 ,  陈俊宏 ,  何震宇 ,  田第鸿 ,  柳伟

IPC: G06K9/62 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明公开了一种特征点提取与匹配方法，该方法包括：将图像输入特征及其权重参数进行二值化处理，并对二值化后的数据进行计算以提取特征点；通过卷积网络获取输入图像的多个层次的、分辨率依次降低的特征图像，将所述多个层次的、分辨率依次降低的特征图像进行多尺度融合，以对特征点进行定位；将进行定位后在空间中相邻的特征点的数据进行哈希运算，建立二进制化的哈希表；当进行匹配时，计算查询数据与所述哈希表中数据的匹配度，返回所述哈希表中匹配度最高的数据。解决了特征点提取方法存储匹配速度慢、精度不高等问题。使得特征点提取、匹配速度以及特征点定位精度都达到了很大的提升。

公开(公告)号：CN112150608A

公开(公告)日：2020-12-29

申请号：CN202010929831.2

申请日：2020-09-07

Applicant: 鹏城实验室 ,  哈尔滨工业大学(深圳)

Inventor： 孟凡阳 ,  潘鸿鹄 ,  何震宇 ,  田第鸿 ,  柳伟

IPC: G06T17/00 ,  G06N3/04 ,  G06N3/08

Abstract: 本申请公开了一种基于图卷积神经网络的三维人脸重建方法，所述方法包括获取待重建的人脸图像，确定所述人脸图像对应的若干人脸子区域；对于每个人脸子区域，获取该人脸子区域对应的人脸特征向量；基于经过训练的图卷积神经网络，确定该人脸特征向量对应的三维人脸结构信息；根据获取到所有三维人脸结构信息，确定所述人脸图像对应的三维人脸图像。本申请通过图卷积神经网络确定人脸图像对应的三维人脸结构信息，使得获取到的三维人脸结构信息中的每个点云数据均包括位置信息以及颜色信息，进而可以提高三维人脸图像的真实性。

公开(公告)号：CN111598149A

公开(公告)日：2020-08-28

申请号：CN202010388573.1

申请日：2020-05-09

Applicant: 鹏城实验室

Inventor： 孟凡阳 ,  任艺帆 ,  陈俊宏 ,  何震宇 ,  柳伟 ,  田第鸿

IPC: G06K9/62 ,  G06N3/04 ,  G06N3/08

Abstract: 本申请公开了一种基于注意力机制的回环检测方法，所述方法在获取到目标图像帧及目标图像帧对应的若干历史图像帧后；获取目标图像帧对应的第一特征图及每个历史图像帧对应的第二特征图；将第一特征图以及若干第二特征图分别输入多尺度特征融合结构，输出目标图像帧对应的第一激活图以及每个历史图像帧对应的第二激活图；根据所述第一激活图和所述若干第二激活图，确定所述目标图像帧对应到的回环帧。本申请通过多尺度特征融合结构，能够通过自注意力机制获取到特征图的多尺度融合机构，能够提取出携带有能适应复杂的环境变化和鲁棒性好的特征描述子的激活图，再利用激活图进行回环检测，能够提高回环检测的准确性以及检测速度。