公开(公告)号：CN119418265A

公开(公告)日：2025-02-11

申请号：CN202411433950.3

申请日：2024-10-15

Applicant: 浙江省交通投资集团有限公司智慧交通研究分公司

Inventor： 孙超 ,  孟少寅 ,  陈天怡 ,  姚进强 ,  张永捷 ,  冯思鹤 ,  王森 ,  张玉杰

IPC: G06V20/52 ,  G06V20/40 ,  G06V20/70 ,  G06V10/26 ,  G06V10/82 ,  G06V10/778 ,  G06N5/04 ,  G06N3/0455

Abstract: 一种在高速公路场景下基于多模态大模型的抛洒物影响分析方法，属于智能交通技术领域。为提高抛洒物监测的实时性和准确性，本发明实例分割模块对视频采集与管理模块输出的图像数据进行细粒度的分割操作，对图像中的抛洒物进行分割和初步识别；指令生成模块将来自实例分割模块、记忆模块和抛洒物检测任务描述的数据进行整合，生成输出指令输出给大模型推理模块，用于执行抛洒物分析任务；大模型推理模块的输入包括指令生成模块的输出指令和视频采集与管理模块预处理后的图像数据，大模型推理模块用于对输入数据进行深度分析和推理，生成高速公路抛洒物的影响分析结果；评估模块用于对大模型推理模块输出的高速公路抛洒物影响分析结果进行全面评估。