公开(公告)号：CN117315603A

公开(公告)日：2023-12-29

申请号：CN202311166638.8

申请日：2023-09-11

Applicant: 福建师范大学

Inventor： 汪晓丁 ,  林晖 ,  刘建敏 ,  镇子航 ,  江磊 ,  林铖彧

IPC: G06V20/56 ,  G06V10/80 ,  G06V10/82 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/0442 ,  G06N3/048 ,  G06N3/082

Abstract: 本发明公开了一种基于视觉融合进行精确运动预测的多模态时空模型，包括：输入编码器模块：分别对轨迹和地图进行编码，并通过特征融合将轨迹和地图的特征整合在一起；空间‑时间交互模块：通过采用空间‑时间交叉注意力机制来提取车辆轨迹之间的空间‑时间交互行为，并通过一个门控机制输出优化后的结果；轨迹解码器模块：利用线性残差层生成多模态轨迹，接收来自空间‑时间交互模块的优化输出，并为车辆预测多个可能的轨迹；以捕捉车辆之间的时空相互作用，并利用道路的地理结构提高预测准确性。