一种基于事件相机辅助的暗光视频增强方法及装置

    公开(公告)号:CN117319806B

    公开(公告)日:2024-08-20

    申请号:CN202311320452.3

    申请日:2023-10-12

    Applicant: 北京大学

    Abstract: 本发明公开了一种基于事件相机辅助的暗光视频增强方法及装置,涉及视频生成技术领域。本发明通过引入高时间分辨率的事件相机,辅助暗光视频帧之间运动信息及其相关性的提取,利用多帧对齐和融合的思想增强暗光视频帧的对比度和信噪比,其增强结果大大超越现有的暗光视频增强方法。相比于现有技术要求事件相机和帧相机在空间上准确对齐,本发明通过多模态相关性建模模块能够应对在现实暗光高速场景中事件相机和帧相机非准确对齐的情况,适用范围大。

    基于事件相机引导的直接光照和间接光照分离方法

    公开(公告)号:CN118447103A

    公开(公告)日:2024-08-06

    申请号:CN202410602716.2

    申请日:2024-05-15

    Applicant: 北京大学

    Abstract: 基于事件相机引导的直接光照和间接光照分离方法,属于光照分离方法领域,包括:拍摄阴影变化触发的事件信号、灰度初始分离结果估计、灰度初始分离结果优化和光照分离结果颜色补偿。本发明只需在场景中拍摄一张照片与一段事件数据,缩短了数据拍摄时间,可应用到动态场景之中。事件相机的事件触发模型使其能离散地记录场景光照变化中的连续变化信息,在实现高时间分辨率的同时降低了数据吞吐量。本发明成功融合了事件相机和机器视觉传统相机输出的图像,能从单张图像与光照变化触发的事件信号重构出彩色高质量的直接光照和间接光照分离结果。同时使用深度学习方法,有效结合场景图像和事件信号,在高频间接光照场景下拥有更好的分离效果。

    一种基于事件相机辅助的暗光视频增强方法及装置

    公开(公告)号:CN117319806A

    公开(公告)日:2023-12-29

    申请号:CN202311320452.3

    申请日:2023-10-12

    Applicant: 北京大学

    Abstract: 本发明公开了一种基于事件相机辅助的暗光视频增强方法及装置,涉及视频生成技术领域。本发明通过引入高时间分辨率的事件相机,辅助暗光视频帧之间运动信息及其相关性的提取,利用多帧对齐和融合的思想增强暗光视频帧的对比度和信噪比,其增强结果大大超越现有的暗光视频增强方法。相比于现有技术要求事件相机和帧相机在空间上准确对齐,本发明通过多模态相关性建模模块能够应对在现实暗光高速场景中事件相机和帧相机非准确对齐的情况,适用范围大。

    基于事件相机引导的直接光照和间接光照分离方法

    公开(公告)号:CN118447103B

    公开(公告)日:2025-04-08

    申请号:CN202410602716.2

    申请日:2024-05-15

    Applicant: 北京大学

    Abstract: 基于事件相机引导的直接光照和间接光照分离方法,属于光照分离方法领域,包括:拍摄阴影变化触发的事件信号、灰度初始分离结果估计、灰度初始分离结果优化和光照分离结果颜色补偿。本发明只需在场景中拍摄一张照片与一段事件数据,缩短了数据拍摄时间,可应用到动态场景之中。事件相机的事件触发模型使其能离散地记录场景光照变化中的连续变化信息,在实现高时间分辨率的同时降低了数据吞吐量。本发明成功融合了事件相机和机器视觉传统相机输出的图像,能从单张图像与光照变化触发的事件信号重构出彩色高质量的直接光照和间接光照分离结果。同时使用深度学习方法,有效结合场景图像和事件信号,在高频间接光照场景下拥有更好的分离效果。

Patent Agency Ranking