公开(公告)号：CN116863376A

公开(公告)日：2023-10-10

申请号：CN202310841913.5

申请日：2023-07-10

Applicant: 上海交通大学

Inventor： 陈宇轩 ,  赵乾佑 ,  范琪 ,  黄栩 ,  吴非凡 ,  武对娣 ,  戚进

IPC: G06V20/40 ,  G06V20/52 ,  G06V10/94 ,  G06V10/82 ,  G06N3/045 ,  G06N3/082

Abstract: 本发明提供了一种电梯轿厢乘客异常事件检测的边缘计算方法及系统，包括：由摄像头实时拍摄获取电梯轿厢监控视频并把视频帧传给边缘设备；边缘设备利用事先训练好的事件检测模型对视频帧中的事件进行识别；若识别到电梯轿厢中出现异常事件，边缘设备则向用户主机发送信息，进而可触发警报并保存图片；所述事件检测模型采用三维残差网络改进的双流网络模型得到异常事件种类；所述边缘设备采用Nvidia Jetson Xavier NX。本发明实现了同时处理时间和空间两个维度特征的效果，避免深度网络训练中梯度消失或梯度爆炸的问题，模型的准确度很高；使用int8量化技术，使模型的计算量大大下降，有利于在边缘设备上的快速识别。

公开(公告)号：CN115527271A

公开(公告)日：2022-12-27

申请号：CN202211253488.X

申请日：2022-10-13

Applicant: 上海交通大学

Inventor： 赵乾佑 ,  黄海清 ,  戚进 ,  胡洁 ,  王小强 ,  陈宇轩 ,  范琪

IPC: G06V40/20 ,  G06V20/40 ,  G06V20/52 ,  G06V10/82 ,  G06V10/774 ,  G06V10/764 ,  G06V10/25 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明提供了一种电梯轿厢乘客异常行为检测方法及系统，包括：步骤S1：加载电梯监控视频，并通过堆栈存储最近播放的连续视频帧；步骤S2：出栈时将堆栈存储的连续视频帧依次输入到目标检测模型中提取人像姿态，若为异常，则根据人像位置划定当前连续视频帧检测区，并基于划定的当前连续视频帧检测区图片组成新的视频帧，存储在堆栈中；步骤S3：将堆栈中存储的新的视频帧输入至行为检测模型识别行为种类；步骤S4：当行为种类为异常行为时则触发警报并保存人像；所述目标检测模型采用改进的YOLO目标检测算法获得目标边框与姿态类别；所述行为检测模型采用综合注意力机制的长短期记忆网络得到行为种类。

公开(公告)号：CN118351349A

公开(公告)日：2024-07-16

申请号：CN202410273497.8

申请日：2024-03-11

Applicant: 上海交通大学

Inventor： 戚进 ,  武对娣 ,  胡洁 ,  赵乾佑 ,  雷逸豪 ,  王伶羽

IPC: G06V10/764 ,  G06V10/74 ,  G06V10/40

Abstract: 本发明提供了一种特征化的复杂环境感知方法及系统，涉及计算机视觉感知技术领域，包括：通过对原始雷达点云进行过滤，保留目标环境的三维坐标，并将点云的高度值映射到栅格地图中；将栅格地图中的高度值视为图像的像素值，对二维栅格数组进行伪图像化；通过构建卷积网络提取特征并将栅格特征与状态特征进行拼接，从而获取环境特征。本发明利用不同环境下模型权重的分布差异表征模型的可解释性，通过可视化特征热力图定性评价环境的一致性，通过余弦相似度曲线定量评价环境的差异性。本发明能够为点云目标检测、场景理解等下游任务提供技术支持，对机器人抓取、无人驾驶、矿山地形感知、智能导航等智能无人系统领域具有重要意义。