-
公开(公告)号:CN114925058A
公开(公告)日:2022-08-19
申请号:CN202210741677.5
申请日:2022-06-28
Applicant: 北京林业大学
IPC: G06F16/215
Abstract: 本申请涉及物联网生态监测数据处理技术领域,具体涉及一种生态数据高效去重的方法。在本申请中,对生态系统接收到的原始生态监测数据进行去重操作时,首先将原始生态监测数据进行一系列的映射与多次哈希计算,得到与其对应且唯一的标识值,该标识值为整型数据;再基于Roaring Bitmap的存储规则,对唯一标识值进行分位计算得到高16位对应的key值与低16位的对应value值,依此判断生态系统中是否存有与此生态监测数据相同的数据,从而判断是否对该生态监测数据进行后续存储操作。基于这种实施方法,可有效地避免生态监测系统存储空间的浪费,实现高效的生态数据去重效果。