公开(公告)号：CN114170623B

公开(公告)日：2024-07-02

申请号：CN202111344563.9

申请日：2021-11-15

Applicant: 华侨大学

Inventor： 张洪博 ,  邓未末 ,  杜吉祥 ,  雷庆

IPC: G06V40/10 ,  G06N3/09 ,  G06N3/0464 ,  G06V10/25 ,  G06V10/82

Abstract: 本发明提供了一种人物交互检测设备及其方法、装置、可读存储介质，包括：获取待检测的目标图像；根据所述目标图像生成输入参数集；输入参数集包括人体候选框集、物体候选框集、目标图像的全局特征和根据人体候选框集和物体候选框集生成HOI提议数据；调用训练好的基于多流架构的HOI检测模型；基于多流架构的HOI检测模型由多个不同流HOI检测模型并联形成；根据输入参数集获取各个流HOI检测模型的输入集，并将输入集输入至对应HOI检测模型，以获得每个HOI检测模型的输出；根据每个HOI检测模型输出计算得到最终交互预测分数，以输出采集到的目标图像中人物交互行为判断结果。旨在解决现有技术中HOI检测方法判断人物交互效果不佳，外观特征性能较差的问题。

公开(公告)号：CN114170623A

公开(公告)日：2022-03-11

申请号：CN202111344563.9

申请日：2021-11-15

Applicant: 华侨大学

Inventor： 张洪博 ,  邓未末 ,  杜吉祥 ,  雷庆

IPC: G06V40/10 ,  G06N3/08 ,  G06N3/04 ,  G06V10/25 ,  G06V10/82

Abstract: 本发明提供了一种人物交互检测设备及其方法、装置、可读存储介质，包括：获取待检测的目标图像；根据所述目标图像生成输入参数集；输入参数集包括人体候选框集、物体候选框集、目标图像的全局特征和根据人体候选框集和物体候选框集生成HOI提议数据；调用训练好的基于多流架构的HOI检测模型；基于多流架构的HOI检测模型由多个不同流HOI检测模型并联形成；根据输入参数集获取各个流HOI检测模型的输入集，并将输入集输入至对应HOI检测模型，以获得每个HOI检测模型的输出；根据每个HOI检测模型输出计算得到最终交互预测分数，以输出采集到的目标图像中人物交互行为判断结果。旨在解决现有技术中HOI检测方法判断人物交互效果不佳，外观特征性能较差的问题。