一种基于智慧数据平台脏数据清理方法

    公开(公告)号:CN113988817A

    公开(公告)日:2022-01-28

    申请号:CN202111330590.0

    申请日:2021-11-11

    Abstract: 本发明属于脏数据检测与清理领域,涉及一种基于智慧数据平台脏数据清理方法,包括;本发明对原始数据进行检测,并对原始数据进行规范化;将规范化的原始数据进行Hashing处理,得到数据对应的hash数据;使用聚类分析选择hash数据中的最优质心,原始数据中包括已聚类数据、原始分割数据;使用恒等判定公式将已聚类数据与原始分割数据的交集进行恒等判定,寻找出缺失的或不需要的脏数据;对找出的脏数据基于Rider‑Firefly混合算法进行清理;本发明提出的算法在脏数据和干净数据之间的区分能力相对于传统算法具有强鲁棒性。

    一种基于发电机组时空序列数据的清洗方法

    公开(公告)号:CN115203188A

    公开(公告)日:2022-10-18

    申请号:CN202210829481.1

    申请日:2022-07-15

    Abstract: 本发明涉及数据清洗技术,特别涉及一种基于发电机组时空序列数据的清洗方法,包括获取原始数据,对原始数据进行清洗的过程中,删除原始数据中冗余数据、冲突数据以及异常数据,构建时空序列模型对原始数据中删除的数据进行填补,完成数据清洗;其中,构建时空序列模型包括以下步骤:通过分析单个站点的原始数据,构建时间序列预测模型;通过分析多个站点的原始数据,构建空间序列预测模型;通过将时间序列预测模型和空间序列预测模型得到预测值通过加权平均的方法构建缺失数据的预测值,完成对缺失数据的清洗;本发明提高了冗余数据、冲突数据、异常数据以及缺失数据这四类脏数据查询和清理的准确度、灵敏度和精密度。

    一种应用于工业互联网的拜占庭容错共识优化方法

    公开(公告)号:CN114499874A

    公开(公告)日:2022-05-13

    申请号:CN202111642100.0

    申请日:2021-12-29

    Abstract: 本发明属于区块链技术共识算法领域,具体涉及一种应用于工业互联网的拜占庭容错共识优化方法;该方法包括:协调阶段、准备阶段、投票阶段和提交阶段;协调阶段在区块链系统中选举Q个领导者,每个领导者配置一个协调者,其中协调者为在领导者集合中随机选取的领导者,每个领导者只能作为一个领导者的协调者;准备阶段客户端向所有领导者和协调者广播区块生成请求;投票阶段领导者和协调者对区块生成请求进行投票表决;提交阶段,领导者和协调者验证投票结果,若验证通过,则达成共识,若验证不通过,则共识失败;各个节点重复执行拜占庭容错共识优化算法,直到所有的节点完成共识;与现有技术相比,具有更低的时延、更高的吞吐量和更大的节点容量。

Patent Agency Ranking