一种基于全双工策略的视频目标分割方法及系统

    公开(公告)号:CN113591868B

    公开(公告)日:2023-09-01

    申请号:CN202110870786.2

    申请日:2021-07-30

    Applicant: 南开大学

    Abstract: 本发明属于视频处理与计算机视觉技术领域,提供了一种基于全双工策略的视频目标分割方法及系统。该方法包括,将待分割的视频通过光流生成器,得到光流图;将表观图、与表观图匹配的光流图输入训练好的视频目标分割模型,得到分割预测图;所述视频目标分割模型包括:依次连接的ResNet50骨架网络、交叉注意力关系模块、全双工模式的双向提纯模块和解码器。本发明通过交叉注意力关系模块,用以实现在特征嵌入空间中的双向信息传递,通过双向全双工模式的双向提纯模块来更新时空特征嵌入上的不一致性,从而有效地提升了模型的分割预测性能。

    一种基于全双工策略的视频目标分割方法及系统

    公开(公告)号:CN113591868A

    公开(公告)日:2021-11-02

    申请号:CN202110870786.2

    申请日:2021-07-30

    Applicant: 南开大学

    Abstract: 本发明属于视频处理与计算机视觉技术领域,提供了一种基于全双工策略的视频目标分割方法及系统。该方法包括,将待分割的视频通过光流生成器,得到光流图;将表观图、与表观图匹配的光流图输入训练好的视频目标分割模型,得到分割预测图;所述视频目标分割模型包括:依次连接的ResNet50骨架网络、交叉注意力关系模块、全双工模式的双向提纯模块和解码器。本发明通过交叉注意力关系模块,用以实现在特征嵌入空间中的双向信息传递,通过双向全双工模式的双向提纯模块来更新时空特征嵌入上的不一致性,从而有效地提升了模型的分割预测性能。

Patent Agency Ranking