公开(公告)号：CN118247510A

公开(公告)日：2024-06-25

申请号：CN202410421497.8

申请日：2024-04-09

Applicant: 东北大学

Inventor： 雷为民 ,  尹刚 ,  王晓非 ,  张伟 ,  吕洪龙 ,  舒延昊

IPC: G06V10/26 ,  G06V40/10 ,  G06V10/82 ,  G06V10/44 ,  G06V10/80 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明设计一种基于帧间自注意力机制的人像分割系统及方法，包括特征提取的编码器模块、语义分割模块以及包含注意力计算和上采样的特征融合解码器模块；首先图像经过编码器模块提取特征，充分利用中间层输出的结构，充分融合图像所有的结构特征；在特定规模上将提取得到的特征送入分割模块；在汇总时间信息的解码器中利用上采样逐步恢复空间的维度，同时融合编码过程提取到的特征；考虑帧与帧之间的时空关系，融合相邻帧之间的特征，并引入注意力机制，自适应的聚焦于对人像分割任务最关键的区域，最后在原图规模大小上将特征图投影到输出，完成视频人像分割；本发明不仅能提高人像分割的准确率，还能在复杂的环境中实现高效、稳定的性能。