一种用于ISP的实时自动超参数优化方法和系统

    公开(公告)号:CN118941436A

    公开(公告)日:2024-11-12

    申请号:CN202410968307.4

    申请日:2024-07-18

    Applicant: 复旦大学

    Abstract: 本发明属于图像信号处理技术领域,具体为用于ISP硬件系统的实时自动超参数优化方法及系统。本发明包括构建参数网络ParaNet和ISP代理模型;参数网络ParaNet采用DNN模型,通过学习原始图像到超参数的映射过程,实现快速准确的参数预测;参数网络的输入为原始图像,输出为一组ISP超参数;ISP代理模型采用8层U型结构的多尺度残差连接3*3卷积层网络结构;超参数优化方法包括模拟不可微分的ISP硬件、将原始图像映射为ISP超参数、在线调优;本发明自动超参数优化系统采用ParaNet和ISP双通路架构,实现实时处理。在FPGA和ASIC上进行验证表明,本发明具有实用性,并有高性能,在保持高精度和高速度的同时,实现实时在线ISP参数搜索和图像处理。

Patent Agency Ranking