公开(公告)号：CN116546237A

公开(公告)日：2023-08-04

申请号：CN202310273999.6

申请日：2023-03-20

Applicant: 南开大学

Inventor： 程明明 ,  李震 ,  朱作良

IPC: H04N21/234 ,  G06T7/269 ,  G06N3/0464 ,  G06N3/0455 ,  G06N3/08 ,  H04N21/2343 ,  H04N21/44 ,  H04N21/4402

Abstract: 本发明涉及视频插帧技术领域，提供了一种基于全对多场变换的视频插帧方法及系统，包括：基于一对视频帧，得到双向相关性容器、双边光流、中间帧特征和若干层级输入帧特征对，并经过若干个中间层，对双边光流和中间帧特征进行更新，得到输出视频帧；在每个中间层中，先将双边光流缩放转换为双向光流，并根据双向光流在双向相关性容器中取出相关性特征，计算双向光流的残差以及中间帧特征的残差，根据残差对双边光流和中间帧特征进行更新，更新后的双边光流估计对输入帧特征进行扭曲操作，扭曲后的输入帧特征与中间帧特征一同进入解码器进行空间尺度放大。保证了跨尺度光流的保真度，减少了错误的累积与放大，有利于生成更加精确的视频插帧结果。