基于子文件的数据重删方法、装置及可读介质

    公开(公告)号:CN116775588A

    公开(公告)日:2023-09-19

    申请号:CN202310793835.6

    申请日:2023-06-30

    Abstract: 本发明公开了一种基于子文件的数据重删方法、装置及可读介质,获取输入文件,判断输入文件为Office文件或Pdf文件;响应于确定输入文件为Office文件,循环解析Office文件中的局部文件数据,对局部文件数据计算指纹信息,并存入recipe,直至检测到中央目录记录;响应于确定输入文件为Pdf文件,对Pdf文件解析得到stream数据,对stream数据计算指纹信息,并存入recipe;将Office文件中的局部文件数据以及Pdf文件中的stream数据定义为数据块,查询数据块对应的指纹信息是否存在于持久化存储介质的元数据保存结构体数组中,得到查询结果,根据查询结果进行重删,可有效提高重删效率。

    一种基于学习索引的数据重删方法和系统

    公开(公告)号:CN118567562A

    公开(公告)日:2024-08-30

    申请号:CN202410699704.6

    申请日:2024-05-31

    Abstract: 本发明公开了一种基于学习索引的数据重删方法和系统,包括:若数据块请求为写请求,则将数据块写入内存缓存并计算指纹值,将指纹值和逻辑页地址写入LPA‑FP索引表;若内存缓存中的所有数据块的数量达到阈值,则为内存缓存中的所有数据块分配对应的物理页地址,并生成若干个FP‑PPA映射,根据若干个FP‑PPA映射通过分段线性回归计算得到FP‑PPA表达式,将FP‑PPA表达式写入内存缓存和闪存,并将内存缓存中的所有数据块写入闪存,将数据块及其相邻数据块的指纹值保存在带外数据区域;若数据块请求为读请求,则根据逻辑页地址在LPA‑FP索引表中查找指纹值,根据指纹值和FP‑PPA表达式计算出物理页地址并在闪存中查询所要读取的数据块,以减少内存缓存的空间并加快物理页地址的查找速度。

    基于变长指纹的数据重删方法、装置及可读介质

    公开(公告)号:CN116820343A

    公开(公告)日:2023-09-29

    申请号:CN202310801832.2

    申请日:2023-06-30

    Abstract: 本发明公开了一种基于变长指纹的数据重删方法、装置及可读介质,对输入文件进行分块,根据数据块的长度采用不同的哈希算法计算数据块对应的指纹;响应于在LRU缓存中查询不到该指纹,则根据该指纹所对应的哈希算法在不同的持久化存储介质中查询;响应于在持久化存储介质中查询到该指纹,将该指纹和元数据存入LRU缓存中,并利用局部性原理将包含该指纹的输入文件中同属于同一持久化存储介质的指纹全部存入LRU缓存中;响应于在持久化存储介质中查询不到该指纹,则构建该指纹的元数据并存储在对应的持久化存储介质,并将该指纹对应的数据块存储在开放容器中,在持久化存储介质中采用对应格式的指纹存储文件对元数据进行分类存储,加快查找。

    多模态智能模型系统化安全防护方法、装置及设备

    公开(公告)号:CN118094176A

    公开(公告)日:2024-05-28

    申请号:CN202410487472.8

    申请日:2024-04-22

    Abstract: 本申请提供一种多模态智能模型系统化安全防护方法、装置及设备,该方法包括:在目标多模态智能模型的安全检测阶段,依据训练好的距离感知判断模型所确定的检测数据与原始数据之间的感知距离,得到与原始数据之间的感知距离满足要求的检测数据,并利用该检测数据对所述目标多模态智能模型进行检测;在检测阶段的检测结果为所述目标多模态智能模型存在安全问题的情况下,一方面,对模型输入进行安全编码防护及分词过滤,另一方面,对多模态智能模型进行多维度全方位评估。该方法可以系统性提升多模态智能模型的安全性。

    动态异构网络潜在异常关系预测方法及装置

    公开(公告)号:CN117591755A

    公开(公告)日:2024-02-23

    申请号:CN202410074560.5

    申请日:2024-01-18

    Abstract: 本申请实施例提供动态异构网络潜在异常关系预测方法及装置。本实施例在预测节点之间的潜在异常关系时,借助于各节点的邻居交互行为(通过各节点的邻居交互集合表征)和邻域结构信息(通过各节点的邻接矩阵、各节点与其它节点的共同邻居矩阵表征)来捕捉不同节点的节点表示的动态变化(比如由节点与邻居节点的交互行为引起等),基于各不同节点的节点表示的动态变化预测节点之间的潜在异常关系,实现了邻居增强的动态异构网络潜在异常关系预测,提高潜在异常关系预测的准确性。

    基于区块链与合同理论的数据处理方法、装置及设备

    公开(公告)号:CN115994588B

    公开(公告)日:2023-07-25

    申请号:CN202310281972.1

    申请日:2023-03-16

    Abstract: 本申请提供一种基于区块链与合同理论的数据处理方法、装置及设备,该方法包括:基于历史数据确定用户设备对应的第一数据质量,从区块链获取用户设备对应的第二数据质量,基于第一数据质量和第二数据质量确定用户设备对应的目标数据质量;基于每个用户设备对应的目标数据质量从M个用户设备中选取I个目标用户设备,将目标合同组发送给I个目标终端设备,将初始全局模型参数发送给I个目标用户设备,以使每个目标用户设备从目标合同组中选取目标激励合同,基于目标激励合同的最佳样本数量和初始全局模型参数获取局部模型参数;基于I个目标用户设备的局部模型参数确定已训练参数。通过本申请方案,提高模型训练过程的效率,训练的收敛速度更快。

Patent Agency Ranking