一种基于T-树的索引优化方法及装置

    公开(公告)号:CN109254962A

    公开(公告)日:2019-01-22

    申请号:CN201710548181.5

    申请日:2017-07-06

    Abstract: 本发明实施例提供一种基于T-树的索引优化方法及装置,所述方法包括:获取包含有批量数据的数据块,所述数据块的数据量根据T-树中的索引节点保存的数据量所确定,其中,所述索引节点的索引信息包括所述索引节点保存的数据量;根据所述数据块的最大数值和最小数值与所述索引信息中的索引数值的最大值和最小值的比较结果、以及第一预设规则,生成新的索引节点;根据所述新的索引节点和第二预设规则,将所述新的索引节点融入到原始索引中。所述装置执行上述方法。本发明实施例提供的基于T-树的索引优化方法及装置,在大批量插入数据的场景下,优化了原始索引,能够提高T-树索引的响应速度。

    一种人脸匹配方法及装置

    公开(公告)号:CN109840453B

    公开(公告)日:2020-12-11

    申请号:CN201711218260.6

    申请日:2017-11-28

    Abstract: 本发明实施例提供一种人脸匹配方法及装置。该方法包括:获取原始图像,原始图像包括预设的标志物信息和待匹配的人脸信息;从原始图像中检测预设的标志物,确定标志物在原始图像中的初始坐标信息;根据初始坐标信息和标志物的标准方向信息,对原始图像进行方向校正,确定第一校正图像;根据标志物在第一校正图像中的第一坐标信息和标志物的标准尺寸信息,对第一校正图像进行尺度校正,确定第二校正图像;根据标志物在第二校正图像中的第二坐标信息,确定人脸区域;截取人脸区域上传至服务器,以供服务器根据人脸区域进行人脸匹配。本发明实施例减小了网络流量压力,能识别方向异常的原始图像,提高人脸匹配的效率。

    一种人脸匹配方法及装置

    公开(公告)号:CN109840453A

    公开(公告)日:2019-06-04

    申请号:CN201711218260.6

    申请日:2017-11-28

    Abstract: 本发明实施例提供一种人脸匹配方法及装置。该方法包括:获取原始图像,原始图像包括预设的标志物信息和待匹配的人脸信息;从原始图像中检测预设的标志物,确定标志物在原始图像中的初始坐标信息;根据初始坐标信息和标志物的标准方向信息,对原始图像进行方向校正,确定第一校正图像;根据标志物在第一校正图像中的第一坐标信息和标志物的标准尺寸信息,对第一校正图像进行尺度校正,确定第二校正图像;根据标志物在第二校正图像中的第二坐标信息,确定人脸区域;截取人脸区域上传至服务器,以供服务器根据人脸区域进行人脸匹配。本发明实施例减小了网络流量压力,能识别方向异常的原始图像,提高人脸匹配的效率。

    分类模型的判别阈值确定方法、装置及电子设备

    公开(公告)号:CN118799882A

    公开(公告)日:2024-10-18

    申请号:CN202311361424.6

    申请日:2023-10-19

    Abstract: 本申请涉及机器学习技术领域,提供一种分类模型的判别阈值确定方法、装置及电子设备。方法包括:获取与待提升分类模型对应的多个数据集;针对各图像数据集,采用图像分类模型,确定图像数据集中各图像样本对应的预测图像样本;根据各预测图像样本的第一预测概率值,确定各预测图像样本对应的第一评估分值;将所有第一评估分值中最大第一评估分值对应的第一预测概率值,确定为图像数据集对应的第一目标预测概率值;根据多个图像数据集各自对应的第一目标预测概率值,确定图像分类模型的判别阈值。该方法通过确定判别阈值,有效提高分类模型的泛化能力,不需要对原分类模型进行复杂的调整,可适用于各种类型的分类问题。

    数据分片策略的确定方法、装置、电子设备及存储介质

    公开(公告)号:CN118861146A

    公开(公告)日:2024-10-29

    申请号:CN202411024249.6

    申请日:2024-07-29

    Abstract: 本发明提供一种数据分片策略的确定方法、装置、电子设备及存储介质,属于数据处理领域,所述方法包括:获取由数据集的分片策略构成的第一策略集;确定分片策略的抽取代价和分片策略的处理代价;抽取代价是利用分片策略将数据集切分为若干个分片的计算代价;处理代价是利用若干个分片执行计算任务的计算代价;基于抽取代价和处理代价,从第一策略集中确定最优分片策略。本发明在对数据集进行分片之前,会获取到多个分片策略,并根据不同分片策略的抽取代价和处理代价从中确定出最优分片策略,以用于实际数据分片,克服了单一分片策略由于受到数据集本身分布不均衡而导致的分片不均衡,实现均匀数据分片,并提高数据分片速度和数据分析效率。

    Hadoop HDFS RPC异常自动定位方法与装置

    公开(公告)号:CN118819916A

    公开(公告)日:2024-10-22

    申请号:CN202311790270.2

    申请日:2023-12-22

    Abstract: 本发明涉及大数据技术领域,提供一种Hadoop HDFS RPC异常自动定位方法及装置,包括:实时采集HDFS分布式文件系统的运行日志和审计日志;提取运行日志中包含预设的RPC异常操作关键词的异常数据,异常数据包括:操作类型、发生时间和操作属性项;解析审计日志中的RPC调用数据,RPC调用数据包括:操作类型、发生时间、操作租户、操作目录和客户端地址;基于操作类型和发生时间,对异常数据和RPC调用数据进行关联匹配;在关联匹配成功,且操作属性项的值超过对应的预设的阈值配置的情况下,基于操作属性项、操作租户、操作目录和客户端确定异常原因。本发明实现了RPC异常原因的自动定位。

    人脸识别方法、装置及计算设备

    公开(公告)号:CN112836701A

    公开(公告)日:2021-05-25

    申请号:CN201911162828.6

    申请日:2019-11-25

    Abstract: 本发明实施例涉及人脸识别技术领域,公开了一种人脸识别方法、装置及计算设备。其中,该方法包括:获取第一图像和带网纹的第二图像,其中,第一图像和第二图像属于同一用户;将第二图像输入生成器模型,得到去除网纹的第二图像;将去除网纹的第二图像以及第一图像输入判别器模型,以判断去除网纹的第二图像是否为真实无网纹图像;若判别器模型的判别结果为假,调整生成器模型和判别器模型的参数,直至判别器模型的判别结果为真;通过调整后的生成器模型对库存证件图像进行去除网纹处理,并根据处理后的库存证件图像进行人脸识别。通过上述方式,本发明实施例能够自动去除图像上的网纹,效率较高。

Patent Agency Ranking