一种数据处理方法、装置和系统

    公开(公告)号:CN113177049A

    公开(公告)日:2021-07-27

    申请号:CN202110521146.0

    申请日:2021-05-13

    Inventor: 张宁 刘林

    Abstract: 本发明提供一种数据处理方法、装置和系统,该方法包括:通过批处理,获取目标区域的历史交通场景的第一要素数据;通过流处理,获取目标区域的实时交通场景的第二要素数据;对第一要素数据和第二要素数据进行聚合处理,并将聚合后的要素数据存储在目标区域对应的缓存区中。本发明对于数据量庞大的历史交通场景的第一要素数据采用批处理的方式导入,对于数据量较小的实时交通场景的第二要素数据采用流处理的方式导入,提高了数据的导入速率,可提供后续数据的检索分析效率,另外,将导入的第一要素数据和第二要素数据放在缓存区中,无需每次重新获取上述要素数据,能够进一步提高数据的检索分析效率,进而能够快速地检索出交通场景下的业务数据。

    分类模型的训练方法、视频分类方法及相关设备

    公开(公告)号:CN113177603A

    公开(公告)日:2021-07-27

    申请号:CN202110517456.5

    申请日:2021-05-12

    Inventor: 张宁 刘林

    Abstract: 本发明提供了一种分类模型的训练方法、视频分类方法及相关设备,所述视频分类方法包括以下步骤:获取待分类视频;提取第三视频帧中的第二特征信息,并根据第二特征信息确定第三视频帧对应的权重值;对多个第三视频帧进行筛选,得到第二目标视频帧;将第二目标视频帧输入至目标分类模型中进行分类,得到分类结果。本发明实施例预先对待分类视频中的视频帧进行了筛选,输入至分类模型中的目标视频帧均为权重值大于等于第一预设阈值的视频帧,这样,剔除了待分类视频中的空白视频帧,确保上述目标视频帧不包括空白视频帧。分类模型无需对待分类视频中的空白视频帧进行相关计算,以此减少了分类模型的计算量,进而提高了视频分类的效率。

Patent Agency Ranking