-
公开(公告)号:CN115100563A
公开(公告)日:2022-09-23
申请号:CN202210670701.0
申请日:2022-06-14
Applicant: 南京工业大学
Abstract: 本发明公开了一种基于混合现实技术与人体动作行为等生物特征识别技术的智能场景系统,属于视频分析、模式识别及混合现实领域。包括以工业现场数据采集模块、双向传输及影像展示机制和数据处理中心为主体的基础架构,以及根据不同场景实际需求可个性化添置更改的动态模块空间;利用AR智能眼镜和工业工厂的摄像头装置获取现场工作图像与视频数据;采用通讯服务搭建的人机交互通道,将图像视频传递至后端数据处理中心,经过视频分析处理后再将反馈意见传输至现场工作人员;对有异常信息反馈的情况,现场工作人员选择是否接通专家系统等方式,进行实时监控生产质量。所述系统可以根据实际情况进行功能模块增减调整,以适应多种场景应用。本发明面向工业领域对视频应用需求,实现生产过程实时交互与监测的智能场景。
-
公开(公告)号:CN114842547B
公开(公告)日:2024-12-03
申请号:CN202210029311.5
申请日:2022-01-11
Applicant: 南京工业大学
IPC: G06V40/20 , G06V10/25 , G06V10/74 , G06V10/764 , G06V10/774 , G06V10/80 , G06V10/82 , G06V10/94 , G06V10/96 , G06N3/0475 , G06N3/084 , G06N3/094 , G09B21/04
Abstract: 本发明公开了一种基于手势动作生成与识别的手语教学方法、装置及系统,属于计算机视觉与模式识别领域。本发明包括通过T‑G姿态生成网络对手语语句文本进行训练,生成姿态生成模型,并利用ThreeDPose姿态迁移技术生成3D虚拟人物动作视频进行手语教学,供学习者模仿;然后利用双流VTN网络对手语数据集进行训练,生成手语翻译模型,并对学习者的动作与标准库手语教学动作进行相似度评估,反馈学习效果。本发明的装置及系统是根据所提供的方法进行手语教学的。利用本发明,丰富了聋哑人教学的模式,能够方便聋哑人士自主学习手语并提高了学习的兴趣,保证了手语教学的效率和质量。
-
公开(公告)号:CN112861823A
公开(公告)日:2021-05-28
申请号:CN202110365813.0
申请日:2021-04-06
Applicant: 南京工业大学
Abstract: 本申请公开了一种用于工件安装关键工序视觉检测与定位的方法及装置,属于视频行为识别领域。在进行工件安装工序检测和定位时,首先采集工件安装过程视频图像,提取图像特征用于待检测工序的粗定位;根据粗定位的结果以及工件整个安装工序所需的时间,截取工件安装中待检测工序的视频;将所截取的工件安装工序视频进行特征提取,得到工件安装过程的动作特征,并进行分类,根据分类结果判断工件安装工序是否合格。本申请的装置能够实现本申请的相应方法步骤。本申请能够对工件安装工序视频进行有效的检测和定位,解决了现有技术对工厂中工件安装工序检测效果不佳的问题。
-
公开(公告)号:CN112861823B
公开(公告)日:2025-02-28
申请号:CN202110365813.0
申请日:2021-04-06
Applicant: 南京工业大学
IPC: G06V40/20 , G06V10/80 , G06V10/764 , G06Q10/0631
Abstract: 本申请公开了一种用于工件安装关键工序视觉检测与定位的方法及装置,属于视频行为识别领域。在进行工件安装工序检测和定位时,首先采集工件安装过程视频图像,提取图像特征用于待检测工序的粗定位;根据粗定位的结果以及工件整个安装工序所需的时间,截取工件安装中待检测工序的视频;将所截取的工件安装工序视频进行特征提取,得到工件安装过程的动作特征,并进行分类,根据分类结果判断工件安装工序是否合格。本申请的装置能够实现本申请的相应方法步骤。本申请能够对工件安装工序视频进行有效的检测和定位,解决了现有技术对工厂中工件安装工序检测效果不佳的问题。
-
公开(公告)号:CN114842547A
公开(公告)日:2022-08-02
申请号:CN202210029311.5
申请日:2022-01-11
Applicant: 南京工业大学
IPC: G06V40/20 , G06V10/25 , G06V10/74 , G06V10/764 , G06V10/774 , G06V10/80 , G06V10/82 , G06V10/94 , G06V10/96 , G06N3/04 , G06N3/08 , G09B21/04 , G06K9/62
Abstract: 本发明公开了一种基于手势动作生成与识别的手语教学方法、装置及系统,属于计算机视觉与模式识别领域。本发明包括通过T‑G姿态生成网络对手语语句文本进行训练,生成姿态生成模型,并利用ThreeDPose姿态迁移技术生成3D虚拟人物动作视频进行手语教学,供学习者模仿;然后利用双流VTN网络对手语数据集进行训练,生成手语翻译模型,并对学习者的动作与标准库手语教学动作进行相似度评估,反馈学习效果。本发明的装置及系统是根据所提供的方法进行手语教学的。利用本发明,丰富了聋哑人教学的模式,能够方便聋哑人士自主学习手语并提高了学习的兴趣,保证了手语教学的效率和质量。
-
-
-
-