一种用于数据血缘检测方法和系统

    公开(公告)号:CN111563103B

    公开(公告)日:2022-05-20

    申请号:CN202010351018.1

    申请日:2020-04-28

    Abstract: 本申请公开了一种用于数据血缘检测方法和系统。提取同一条存储记录在不同节点所对应的节点数据;利用路径规则库将节点数据映射存储于路径数据集合中,基于路径溯源算法将路径数据集合中的每个子集合进行归一化处理,获得节点数据的的上下级关系的路径标识集合;利用关系规则库将节点数据中的数据项映射存储于数据项集合中,基于关系溯源算法分析数据项之间的关联关系,获得数据项溯源结果集合;基于节点数据的路径标识集合和数据项溯源结果集合构建每条数据在不同节点的数据血缘信息库。该方案通过路径溯源和关系溯源分别从节点数据和数据项两个层面进行分析,实现业务数据或者业务要素的全面快速准确的溯源要求,提升大数据的业务支撑能力。

    基于规则算子动态编排的数据库分析方法、装置及介质

    公开(公告)号:CN110851428B

    公开(公告)日:2022-05-20

    申请号:CN201911137144.0

    申请日:2019-11-19

    Abstract: 本发明提供了一种基于规则算子动态编排的数据库分析方法、装置及介质,该方法通过从数据库中获取用户输入的数据集合,并对所述数据集合进行识别和解析,判断数据库中是否存在与所述数据集合匹配的业务类型,如果是,则使用数据处理规则推荐算法推荐多个规则算子,如果否,所述用户在数据库中添加多个规则算子,然后对所述多个规则算子的权重进行调整,将调整权重后的规则算子编排为数据分析模型,再使用所述数据分析模型对所述数据集合进行分析得到分析结果。本发明可以通过基于待分析数据库中的数据类型自动编排规则算子生成数据分析模型,提高数据库中的数据分析模型的运行效率,提高了数据库的性能。

    一种利用复杂表达式进行数据比对的方法、装置及存储介质

    公开(公告)号:CN110188113B

    公开(公告)日:2022-05-13

    申请号:CN201910383393.1

    申请日:2019-05-09

    Abstract: 本发明公开了一种利用复杂表达式进行数据比对的方法,包括以下步骤:S1:获取包括结构化数据和非结构化数据的基础数据;S2:选择结构化数据和非结构化数据中的数据作为子表达式,并通过逻辑运算符构造成复杂表达式,其中子表达式包括取自结构化数据的第一子表达式以及取自非结构化数据的第二子表达式,第一子表达式被用于精确匹配,第二子表达式被用于关键词匹配;S3:将子表达式分别进行比对获得比对情况;以及S4:根据比对情况通过表达式引擎对复杂表达式进行计算,得到数据的比对结果。在数据种类繁多、格式多样化的情况下实现复杂表达式实时、快速比对。既可以做到精确匹配,也可以非结构化的关键词匹配,为将来应用提供更精确有效的信息。

    一种处理数据的方法、装置以及存储介质

    公开(公告)号:CN114443647A

    公开(公告)日:2022-05-06

    申请号:CN202111631091.5

    申请日:2021-12-28

    Abstract: 本发明公开了一种处理数据的方法、装置以及存储介质。所述方法包括:获取表数据;生成与表数据对应的描述文件,描述文件包含表数据的表结构信息和表数据的存储格式;根据描述文件包含的表结构信息和存储格式对表数据进行解析,得到表数据的具体内容。本发明提供的一种处理数据的方法和装置,适用于表结构多、表数据来源多、响应要求及时和多源异构的海量数据快速实现数据解析的场景。通过描述文件实现解析代码复用,从而避免重复开发,提高了数据处理的效率。对于新的需要解析的表数据,只需要生成与表数据对应的描述文件即可对表数据解析入库。

    一种图像相似度计算方法、装置、存储介质

    公开(公告)号:CN109740633B

    公开(公告)日:2022-02-22

    申请号:CN201811506274.2

    申请日:2018-12-10

    Abstract: 本发明公开了一种图像相似度计算方法,包括S1:分别提取第一图像和第二图像中的特征点及其对应的特征向量;S2:通过比较第一图像和第二图像中的特征向量的第一距离,将所有特征点根据相似性进行匹配;S3:将匹配好的特征点按相似性高低进行排序,并选取前N个特征点对;S4:从中随机选择n个基准点,分别计算第一图像或第二图像中其余特征点与基准点的X方向以及Y方向的相对位置;S5:根据其余特征点与基准点的X方向的相对位置计算X轴距离,根据其余特征点与基准点的Y方向的相对位置计算Y轴距离,对X轴距离和Y轴距离进行计算并设置一个阈值范围以判定第一图像与第二图像是否为相同图像。能够克服特征点误匹配导致检测误差。

    一种内外网数据同步方法和系统

    公开(公告)号:CN108616603B

    公开(公告)日:2021-11-02

    申请号:CN201810461487.1

    申请日:2018-05-15

    Abstract: 本发明涉及一种内外网数据同步方法和系统,在该方法中,包括以下步骤:外网设备分析提取文件的文件信息,并存入数据库表格内,如文件包含附件文件,则将附件文件备份至第一路径下,将附件文件的文件名录入该表格中的文件名字段对应位置处,将附件文件移动至第二路径下,否则,删除该文件,导出表格中新增加的记录并保存并发送至内网设备,将第二路径下的附件文件发送至内网设备;内网设备分别保存接收到的到的记录文件和附件文件至数据库和第四路径中;外网和内网设备分别根据对应数据库中待显示文件对应的表格中存储的信息进行显示。本发明减少了文件的传输量,提高了传输效率,降低了内网设备中文件分析量,提高了内外网设备间的数据同步效率。

    一种利用多个人脸引擎进行人脸查询的方法及装置

    公开(公告)号:CN109063656B

    公开(公告)日:2021-08-24

    申请号:CN201810895823.3

    申请日:2018-08-08

    Abstract: 本发明公开了一种利用多个人脸引擎进行人脸查询的方法及装置,人脸查询方法包括如下步骤:S1:分别使用m个人脸查询某张人脸,获得m组最像的k张人脸;S2:利用归一化函数对每个人脸引擎的最像的k张人脸的相似度进行第一次归一化处理以得到m个相似度的集合;S3:将获得的m组最像的k张人脸进行合并,对每个排行位置配置不同的排行权重,分别计算t张人脸中的每张人脸的排行总权重和最大相似度。S4:根据其排行总权重对其最大相似度进行第二次归一化处理,得到t个综合相似度的集合。S5:对综合相似度的集合进行重新降序排序,截取前k张人脸以作为最终的查询结果。利用本发明能够实现利用多个人脸引擎进行人脸查询。

    动态人脸识别方法及计算机可读存储介质

    公开(公告)号:CN107944427B

    公开(公告)日:2020-11-06

    申请号:CN201711337096.0

    申请日:2017-12-14

    Abstract: 本发明公开了一种动态人脸识别方法及计算机可读存储介质,方法包括:根据预设的采样率,依次从动态视频流中获取一帧静态图片;对所述一帧静态图片进行人脸检测,得到人脸图片集;获取所述人脸图片集中各人脸图片的关键信息;根据所述关键信息,通过相似度算法对各人脸图片进行匹配分类,得到各人脸图片对应的各人脸类型,并根据人脸图片的关键信息,构建或更新对应的人脸类型的结构化信息;根据结构化信息,对各人脸类型进行筛选,得到人脸集合。本发明可快速有效地识别出视频中的所有人脸,且可保证正识率和实时性。

    一种用于人脸图像的质量分析方法和系统

    公开(公告)号:CN111784658A

    公开(公告)日:2020-10-16

    申请号:CN202010604622.0

    申请日:2020-06-29

    Abstract: 本发明给出了一种用于人脸图像的质量分析方法和系统,包括对待分析人脸图像进行低通滤波处理获取模糊图像,获取待分析人脸图像的清晰度分值Fdefinition;根据人脸边界获取人脸中心点的坐标信息;利用人脸中心点的坐标信息分别获取待分析人脸图像中眼睛、鼻尖和嘴角在待分析人脸图像中的坐标信息;计算获得人脸中心点与待分析人脸图像的中心以及鼻尖与人脸边界的中心点的偏移度、眼睛、嘴角的倾斜度、脸部左右对称度的分值,加权求和获得待分析人脸图像的正脸程度分值Ffront;利用待分析人脸图像的尺寸计算的人脸大小分值Fsize;加权求和获得待分析人脸图像的综合分值。该方法能够定量评价人脸图像质量且对于硬件平台适配性高,可以实时获取人脸图像质量。

Patent Agency Ranking