一种基于多源信息融合的轻量化车辆再辨识方法

    公开(公告)号:CN117456480A

    公开(公告)日:2024-01-26

    申请号:CN202311769679.6

    申请日:2023-12-21

    Abstract: 本发明公开了一种基于多源信息融合的轻量化车辆再辨识方法,涉及计算机视觉与机器学习技术领域,包括:构建神经网络;所述神经网络包括依次连接的ResNet50网络、局部特征融合网络和混合注意力模块;使用监督对比损失和多源信息识别损失对神经网络进行联合训练,直至收敛,得到教师网络;选取计算量和参数量比教师网络均小的模型作为学生网络;通过知识蒸馏,对学生网络进行监督,训练直至收敛,得到轻量化的车辆再辨识模型;基于轻量化的车辆再辨识模型,输出再辨识结果。本发明利用多源信息融合的方式协调不同传感器数据以提高再辨识性能,并辅以知识蒸馏,实现在有限的计算资源下,实现高质量的再辨识,从而为各种应用场景提供了更多的灵活性。

    基于三维几何失真的MIV沉浸式视频编码率失真优化方法

    公开(公告)号:CN117440158A

    公开(公告)日:2024-01-23

    申请号:CN202311759886.3

    申请日:2023-12-20

    Applicant: 华侨大学

    Abstract: 本发明公开了一种基于三维几何失真的MIV沉浸式视频编码率失真优化方法,涉及视频编码领域,包括:S1,基于MIV编码平台编码沉浸式视频序列,生成图集后,计算与深度映射范围系数;S2,使用支持MIV标准的二维视频编码器编码沉浸式视频几何图集时,构建三维几何失真与均方误差的关系模型;S3,根据三维几何失真与均方误差的关系模型,计算三维几何失真系数;S4,根据三维几何失真系数,计算率失真优化模型中新的拉格朗日乘子,基于调整后的率失真优化模型编码当前CTU,以改善沉浸式视频渲染质量的率失真性能。本发明最终渲染的沉浸式视频质量与码率的率失真性能更好。

    结合分类加强与细化微调的目标跟踪方法、装置及可读介质

    公开(公告)号:CN116739903A

    公开(公告)日:2023-09-12

    申请号:CN202310793797.4

    申请日:2023-06-30

    Applicant: 华侨大学

    Abstract: 本发明公开了一种结合分类加强与细化微调的目标跟踪方法、装置及可读介质,构建目标跟踪网络模型并训练,得到经训练的目标跟踪网络模型,将当前帧输入ResNet模块,将ResNet模块的输出特征输入全局感知模块,得到全局感知特征,将全局感知特征与模板帧输入分类加强模块,得到前景特征图和前景概率特征图;在第一分支中,将降维后的全局感知特征与模板帧输入判别相关滤波器,得到定位特征图;在第二分支中,将前景特征图、前景概率特征图和定位特征图融合得到混合特征图,将混合特征图与ResNet模块的部分输出特征输入微调路径模块,得到目标的掩膜,通过拟合掩膜,得到矩形框,细化微调模块根据矩形框提取目标的特征,并与模板帧做逐像素相关,得到目标跟踪框。

    一种基于多分支卷积神经网络的HEVC帧内预测方法

    公开(公告)号:CN109996084B

    公开(公告)日:2022-11-01

    申请号:CN201910361446.X

    申请日:2019-04-30

    Applicant: 华侨大学

    Abstract: 本发明涉及一种基于多分支卷积神经网络的HEVC帧内预测方法,属于视频编码领域,本方法使用多分支卷积神经网络,对每个CTU进行预处理,并分别作为不同分支的卷积神经网络的输入,经过卷积计算之后,将得到的特征进行全连接,考虑不同QP值的影响,并最终输出三个分支的分类结果,三个分支分别对应每个CTU中深度等级0,1,2,判断三个深度等级的CU是否继续划分或者停止划分。本发明一种基于多分支卷积神经网络的HEVC帧内预测方法能够有效地减少编码器计算开销,在保持编码性能基本不变的情况下,减少编码时间。

    一种高效的车辆再辨识方法和装置

    公开(公告)号:CN113486723A

    公开(公告)日:2021-10-08

    申请号:CN202110649660.2

    申请日:2021-06-10

    Applicant: 华侨大学

    Abstract: 本发明涉及一种高效车辆再辨识方法,包括:构造四个不同方向性深度网络,并在它们的训练过程中使用困难样本进行协调调度,增强四个方向性深度所学车辆特征之间的互补性;利用知识蒸馏方法,将四个不同方向性深度网络作为教师网络,用于指导一个简单的学生网络训练,再将学生网络用于车辆再辨识,从而降低车辆再辨识的计算量。

    一种基于信息复用的HEVC多描述视频编码

    公开(公告)号:CN111432221A

    公开(公告)日:2020-07-17

    申请号:CN202010242715.3

    申请日:2020-03-31

    Applicant: 华侨大学

    Abstract: 一种基于信息复用的HEVC多描述视频编码方法,首选将序列进行下采样分为多个子序列,并将序列进行分类,利用序列间的相关性,以复用编码单元的分层深度、预测单元的最佳模式和预测向量方式编码,以及采用CU-SKIP模式、CU-INTER模式、CU-INTRA模式进行编码,有效地提高HEVC编码的容错能力,且只需要对输入视频序列的一个子序列进行编码预测,大大降低编码的计算复杂度,无需传输间接编码子序列各编码单元的编码树结构、预测模式及预测向量,因此可以大幅度降低多描述编码的冗余,提高编码效率。

Patent Agency Ranking