公开(公告)号：CN117528085B

公开(公告)日：2024-03-19

申请号：CN202410020281.0

申请日：2024-01-08

Applicant: 中国矿业大学 ,  燕园安全科技(徐州)有限公司

Inventor： 赵作鹏 ,  闵冰冰 ,  刘营 ,  高宇蒙 ,  缪小然 ,  胡建峰 ,  贺晨 ,  赵广明 ,  周杰 ,  雅可 ,  胡帅 ,  唐婷

IPC: H04N19/124 ,  H04N19/132 ,  H04N19/88 ,  H04N19/91 ,  G06T9/00 ,  G06V10/762 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/0895

Abstract: 本发明公开了一种基于智能特征聚类的视频压缩编码方法，包括以下步骤：步骤1、将视频进行预处理后利用深度学习模型对视频进行智能特征提取；步骤2、采用特征聚类算法对提取出的特征进行聚类，将相似或冗余的特征整合在一起，为后续编码提供更有效的数据结构；步骤3、对聚类后的特征集进行编码，通过视觉增强和数据压缩的联合制定来进行视频压缩；步骤4、在解码端，根据编码数据和聚类中心信息，恢复出原始的特征集；步骤5、利用深度学习模型的重建模块，根据解码后的特征集重建原始视频。本发明能够准确有效地进行特征提取和压缩编码，同时具有较高的压缩比和图像质量。

公开(公告)号：CN117520589B

公开(公告)日：2024-03-15

申请号：CN202410008193.9

申请日：2024-01-04

Applicant: 中国矿业大学 ,  燕园智能科技(徐州)有限公司

Inventor： 赵作鹏 ,  缪小然 ,  刘营 ,  高宇蒙 ,  闵冰冰 ,  胡建峰 ,  贺晨 ,  赵广明 ,  周杰 ,  孙守都 ,  宋喷玉

IPC: G06F16/583 ,  G06F16/532 ,  G06F16/383 ,  G06F16/332 ,  G06F18/2113 ,  G06F18/22 ,  G06V20/10 ,  G06V10/42 ,  G06V10/44 ,  G06V10/74 ,  G06V10/80 ,  G06V10/82

Abstract: 本发明公开了一种局部特征与全局特征融合的跨模态遥感图文检索方法，对输入图像进行全局特征提取和局部特征提取后，考虑全局特征与局部特征的差异，通过多级信息特征融合模块动态生成权重、并对两种特征进行加权以更好地表征图像；使用递归神经网络对文本信息进行建模以提取文本时间信息；计算加权融合后图像特征与文本特征之间的相似性度量，按照从大到小顺序对检索结果进行排序；利用候选信息进行反向检索得到最终检索结果。本局部特征与全局特征融合的跨模态遥感图文检索方法能够通过局部信息修正全局信息、利用全局信息补充局部信息，进而能够更准确的检索希望得到的遥感数据。

公开(公告)号：CN117671589A

公开(公告)日：2024-03-08

申请号：CN202311652990.2

申请日：2023-12-04

Applicant: 中国矿业大学 ,  燕园智能科技(徐州)有限公司

Inventor： 赵作鹏 ,  闵冰冰 ,  高宇蒙 ,  缪小然 ,  胡建峰 ,  刘营 ,  雅可 ,  徐珊珊 ,  胡帅 ,  赵强 ,  亢永

IPC: G06V20/52 ,  G06V10/44 ,  G06V10/80 ,  G06V10/766 ,  G06V10/764 ,  G06V10/82 ,  G06V40/16 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明公开了一种基于新型视频分析方法的矿工排队秩序异常报警系统，涉及计算机视觉技术领域，通过视频监控系统获取矿工排队视频数据，提取排队图像并标注矿工排队数据集，进行深度学习模型的训练和验证。算法的核心在于改进YOLOv5模型的特征金字塔部分，设计出新型的BCrFPN，并引入动态标签分配策略，动态设置阈值，以更合理地评估候选样本的质量；通过计算人脸框与排队区域的相交面积并设置阈值，来准确判断矿工是否有序排队，输出预警结果，并上传井上监控平台，满足安全生产的实际要求。本发明针对煤矿井下特殊的生产环境，通过新的视频分析算法实现人员排队秩序异常报警，检测效率和可靠性高，实用性强，适用于煤矿安全生产管理。

公开(公告)号：CN117520589A

公开(公告)日：2024-02-06

申请号：CN202410008193.9

申请日：2024-01-04

Applicant: 中国矿业大学 ,  燕园智能科技(徐州)有限公司

Inventor： 赵作鹏 ,  缪小然 ,  刘营 ,  高宇蒙 ,  闵冰冰 ,  胡建峰 ,  贺晨 ,  赵广明 ,  周杰 ,  孙守都 ,  宋喷玉

IPC: G06F16/583 ,  G06F16/532 ,  G06F16/383 ,  G06F16/332 ,  G06F18/2113 ,  G06F18/22 ,  G06V20/10 ,  G06V10/42 ,  G06V10/44 ,  G06V10/74 ,  G06V10/80 ,  G06V10/82

Abstract: 本发明公开了一种局部特征与全局特征融合的跨模态遥感图文检索方法，对输入图像进行全局特征提取和局部特征提取后，考虑全局特征与局部特征的差异，通过多级信息特征融合模块动态生成权重、并对两种特征进行加权以更好地表征图像；使用递归神经网络对文本信息进行建模以提取文本时间信息；计算加权融合后图像特征与文本特征之间的相似性度量，按照从大到小顺序对检索结果进行排序；利用候选信息进行反向检索得到最终检索结果。本局部特征与全局特征融合的跨模态遥感图文检索方法能够通过局部信息修正全局信息、利用全局信息补充局部信息，进而能够更准确的检索希望得到的遥感数据。

公开(公告)号：CN117115787A

公开(公告)日：2023-11-24

申请号：CN202311164658.1

申请日：2023-09-11

Applicant: 中国矿业大学

Inventor： 赵作鹏 ,  贺晨 ,  赵广明 ,  周杰 ,  闵冰冰 ,  缪小然 ,  胡建峰 ,  高宇蒙

IPC: G06V20/59 ,  G06V10/40 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明适用于计算机视觉检测技术领域，提供了一种基于动态候选时间序列的端云协同疲劳驾驶检测方法，所述方法包括以下步骤：获取人像图像帧数据；根据位置估计模型对人像图像帧数据进行分析得到待检测图像；将待检测图像按照动态候选序列进行存储；根据疲劳分神检测模型对待检测图像处理得到检测结果；将检测结果上传至云端。本发明基于端云协同的方法，使疲劳驾驶行为可以在低算力端侧设备上进行实时检测，使用多任务模型减少对计算资源的占用，采用端云协同计算框架，降低端侧识别结果的误检率，最终可以在算力受限的情况，实时准确地检测疲劳驾驶行为。

公开(公告)号：CN116597587A

公开(公告)日：2023-08-15

申请号：CN202310631066.X

申请日：2023-05-31

Applicant: 河南龙宇能源股份有限公司 ,  中国矿业大学

Inventor： 张文康 ,  赵作鹏 ,  闵冰冰 ,  杨风才 ,  龚平 ,  郝明月 ,  张新建 ,  王华辉 ,  薛兵建 ,  李作奎

IPC: G08B13/196 ,  G08B13/16

Abstract: 本发明涉及计算机视觉技术领域，具体公开了基于音视协同识别的井下运转设备高危区域入侵预警方法。本发明通过检测摄像头获取煤矿井下的音视频数据；将音视频数据进行解复用和预处理；进行数据存储；对第二音频流进行声音识别，对第二视频流进行目标检测，进行音视频协同识别，判断是否存在人员入侵行为；在存在人员入侵行为时，生成报警信息，将报警信息上传至平台，并进行语音报警。能够通过声音识别和目标检测相结合的方式，利用声音来判断设备是否正在运转，利用目标检测判断是否有人员入侵，实现对煤矿井下运转设备高危区域的快速准确检测和预警，具有准确性高、响应速度快、操作简单的优点，可大幅提高煤矿生产的安全性和效率。