-
公开(公告)号:CN113643218A
公开(公告)日:2021-11-12
申请号:CN202110814527.8
申请日:2021-07-19
Applicant: 北京大学
Abstract: 本申请公开了一种基于神经网络的图像重建方法、装置、电子设备及介质。通过应用本申请的技术方案,可以根据基本重建子网络,自适应地利用脉冲阵列的短时相关性粗略地估计不同时刻点的瞬时光强;并利用残差学习结构的特征提取子网络进一步提取不同时刻点的深层特征;以使后续根据运动对齐的图像重建子网络,在不产生运动模糊的前提下,利用脉冲阵列的长时相关性进一步提升重建图像的质量。
-
公开(公告)号:CN113329146A
公开(公告)日:2021-08-31
申请号:CN202110447689.2
申请日:2021-04-25
Applicant: 北京大学
Abstract: 本申请涉及计算成像技术领域,具体而言,本申请涉及一种脉冲相机模拟方法与装置。所述方法包括以下步骤:确定欲模拟的一个采样时间段内各像素点的相对运动速度,并初始化传感器像素的尺寸;计算所模拟的采样时间段内各像素的光子累积量,并将所述光子累积量转换为电子累积量;根据所述电子累积量,更新传感器每个像素上的电子总累积量;将所述电子总累积量与预设的阈值进行比较,如果达到或超过所述阈值则进行脉冲发放,并生成相应的脉冲序列;获取与脉冲序列相对应的基准图序列。本申请提出的方法与装置可以同时产生脉冲序列和其所对应的基准图像序列,从而为脉冲相机在算法原型、深度学习和算法基础测试等方面的技术提供了数据保障。
-
公开(公告)号:CN113327266A
公开(公告)日:2021-08-31
申请号:CN202110453943.X
申请日:2021-04-26
Applicant: 北京大学
Abstract: 本发明能够提供基于脉冲相机的光流估计方法及装置、计算机设备、介质,光流估计方法包括如下步骤。获取通过脉冲相机采集的脉冲序列,基于各个脉冲开始积累的时间和发放的时间确定脉冲的脉冲间距。根据脉冲间距确定待进行光流估计的时间段内各个时间点对应的脉冲密度。利用脉冲密度一致性约束条件和空域局部平滑性约束条件进行光流估计,以得到光流场。本发明能够从脉冲序列中得到任一时刻的光流场,并通过光流场构成一个光流场序列,描述一个连贯的运动过程。本发明基于多个脉冲帧时刻之间沿运动轨迹的光照一致性降低噪声的影响,估计出鲁棒性更好的光流场序列。本发明适于高速运动的场景,是图像重建、物体追踪、物体识别等应用的重要基础。
-
公开(公告)号:CN102136144A
公开(公告)日:2011-07-27
申请号:CN201110089697.0
申请日:2011-04-11
Applicant: 北京大学
Abstract: 本发明公布了一种图像配准可靠性模型及其构造方法和一种基于该模型的超分辨率图像的重构方法。本发明提供的图像配准可靠性模型,利用图像配准残差在不同尺度下的分布特征和图像局部结构信息来表示每个像素配准可靠性。超分辨率图像的重构方法:利用核回归的预测模型,根据低分辨率图像结构特性和低分辨率图像间的运动关系,根据图像内容和运动特性自适应的3维核函数用来估计高分辨率像素值。本发明不仅能够对运动平滑的低分辨率图像进行超分辨率重构,同时也可以对运动剧烈的低分辨率图像进行有效的超分辨率重构,提高了超分辨率技术的鲁棒性,适合实际应用。
-
公开(公告)号:CN115665573A
公开(公告)日:2023-01-31
申请号:CN202211110310.X
申请日:2022-09-13
Applicant: 北京大学
Abstract: 本申请公开了一种脉冲编码方法、图像获取方法、设备及介质。该脉冲编码方法包括:对入射光进行光电转换得到对应于图像传感器中各像素的电荷;持续累积各像素的电荷形成累积电压;每当累积电压达到预设电压阈值时,清零累积的电荷并产生脉冲信号;持续累积脉冲信号并对累积的脉冲信号的数量进行计数;在脉冲读出时刻,根据当前计数器的累积数量N,从预设的脉冲符号集中选择表示小于或等于N的最大整数M的符号;输出M对应的脉冲编码符号并更新计数器的状态。本申请的脉冲编码方法,能提高对高动态范围的视觉信号的表达能力,提高对场景中高亮区域和偏暗区域同时进行纹理刻画和运动捕捉的能力,并最终提高高动态范围视觉场景的成像效果。
-
公开(公告)号:CN114584703A
公开(公告)日:2022-06-03
申请号:CN202210096416.2
申请日:2022-01-26
Applicant: 北京大学
Abstract: 本申请公开了一种仿生式脉冲相机的成像方法、装置、设备及存储介质,方法包括:根据预设的脉冲相机成像算法以及预设时间段内的连续脉冲阵列重构出基本图像序列;从所述基本图像序列计算任意时刻任意像素位置上的运动矢量,形成基本图像序列之间的运动场;根据所述运动场以及所述脉冲阵列,计算成像网格目标成像点对各个脉冲的贡献权重;根据成像网格目标成像点对各个脉冲的贡献权重重建出高分辨率图像序列。根据本申请实施例提供的方法,能够应用于高速运动的场景,清晰地重建出场景中物体的运动细节,得到的图像不仅避免了运动模糊而且具有较高的信噪比。
-
公开(公告)号:CN113329146B
公开(公告)日:2022-06-03
申请号:CN202110447689.2
申请日:2021-04-25
Applicant: 北京大学
Abstract: 本申请涉及计算成像技术领域,具体而言,本申请涉及一种脉冲相机模拟方法与装置。所述方法包括以下步骤:确定欲模拟的一个采样时间段内各像素点的相对运动速度,并初始化传感器像素的尺寸;计算所模拟的采样时间段内各像素的光子累积量,并将所述光子累积量转换为电子累积量;根据所述电子累积量,更新传感器每个像素上的电子总累积量;将所述电子总累积量与预设的阈值进行比较,如果达到或超过所述阈值则进行脉冲发放,并生成相应的脉冲序列;获取与脉冲序列相对应的基准图序列。本申请提出的方法与装置可以同时产生脉冲序列和其所对应的基准图像序列,从而为脉冲相机在算法原型、深度学习和算法基础测试等方面的技术提供了数据保障。
-
公开(公告)号:CN113067979A
公开(公告)日:2021-07-02
申请号:CN202110253200.8
申请日:2021-03-04
Applicant: 北京大学
Abstract: 本发明公开了一种基于仿生式脉冲相机的成像方法、装置、设备及存储介质,所述方法包括:根据预设时间段内的多个脉冲阵列,得到重构的图像序列;根据光流法得到所述图像序列之间的相对运动关系;根据所述相对运动关系将所述图像序列进行运动对齐,得到不同帧各像素点间的对应关系;根据不同帧各像素点间的对应关系,对所述重构的图像序列的像素点进行时间维度上滤波,更新像素点的光强值以生成图像。根据本公开实施例提供的基于仿生式脉冲相机的成像方法,解决了传统相机难以对高速运动的物体进行清晰成像的问题,可以产生信噪比高、不模糊的图像。
-
公开(公告)号:CN113034634A
公开(公告)日:2021-06-25
申请号:CN202110240363.2
申请日:2021-03-04
Applicant: 北京大学
Abstract: 本申请实施例中提供了一种基于脉冲信号的自适应成像方法、系统及计算机介质,根据预设时间段内的脉冲信号,得到待成像物体基于像素点的多个脉冲阵列;根据多个脉冲阵列,得到预设时间段内的重建图像序列;根据重建图像序列之间的相对运动,确定重建图像序列的各像素点的运动轨迹;根据各像素点的运动轨迹,建立各像素点时间方向上的自回归模型;自适应选择重建图像序列上的像素点,对自回归模型进行自适应学习,确定自回归模型的模型参数;根据模型参数,对重建图像序列的像素点进行时间维度上滤波,更新像素点的光强值以生成图像。解决了传统相机难以对高速运动的场景物体进行清晰成像的问题,可以产生信噪比高、不模糊的图像。
-
公开(公告)号:CN106412596B
公开(公告)日:2019-04-09
申请号:CN201610891442.9
申请日:2016-10-12
Applicant: 北京大学
IPC: H04N19/37 , H04N19/164
Abstract: 本发明公开了一种以梯度采样数据为主、少量低频系数为辅来传输视觉信息的视频图像传输方法。梯度采样数据由梯度数据经过随机投影产生。相比于直接传输梯度数据,本发明提出的传送梯度采样数据可以明显减小传输数据量,适应信道带宽不足的情况。本发明不仅具有SoftCast的无悬崖效应、能同时服务多个不同信道条件下的客户端的优点,而且能达到更好的视觉效果,能适应于不同的信道信噪比和带宽环境。
-
-
-
-
-
-
-
-
-