索引结构、插入和删除数据的方法、数据查询方法

    公开(公告)号:CN119397060A

    公开(公告)日:2025-02-07

    申请号:CN202410717648.4

    申请日:2024-06-04

    Abstract: 本申请提供一种索引结构、插入和删除数据的方法、数据查询方法。该索引结构包括第一哈希组件和第二哈希组件,第一哈希组件包括第一哈希函数、第二哈希函数和二维指纹矩阵,第一哈希函数用于确定数据的哈希指纹,第二哈希函数用于根据哈希指纹确定二维指纹矩阵中的第一存储位置,第一存储位置用于存储哈希指纹并记录哈希指纹是否为重复数据;第二哈希组件包括第三哈希函数和一维指纹向量,第三哈希函数用于根据哈希指纹确定一维指纹向量中的第二存储位置,第二存储位置用于记录哈希指纹的重复次数。本申请实施例提供的索引结构可以在保证高性能的前提下支持对大量重复数据的查询、插入和删除操作。

    远端索引节点的确定方法、装置、设备及介质

    公开(公告)号:CN119226284A

    公开(公告)日:2024-12-31

    申请号:CN202310785150.7

    申请日:2023-06-29

    Abstract: 本申请公开了一种远端索引节点的确定方法、装置、设备及介质,属于分布式存储技术领域。为分布式架构下的计算节点构建范围索引缓存,在范围索引缓存中构建缓存索引节点。通过检索确定存在覆盖远端索引节点的确定请求范围的目标缓存节点,根据目标缓存节点确定存储节点中的远端索引节点。不需要递归地访问存储节点中索引结构的各层节点,直到检索到目标数据,而是只需要在范围索引缓存中检索到覆盖远端索引节点的确定请求范围的目标缓存节点,即可直接根据目标缓存节点确定存储节点中的远端索引节点,检索得到目标数据。减少访问远端存储节点中范围索引的开销,进而提升整体的数据访问性能。

    查询计划生成方法、装置、存储介质及电子装置

    公开(公告)号:CN118838915A

    公开(公告)日:2024-10-25

    申请号:CN202310442243.X

    申请日:2023-04-23

    Abstract: 本发明实施例提供了一种查询计划生成方法、装置、存储介质及电子装置。该方法包括:通过连接限制空间对查询语句中各个表之间的连接算法进行连接限制,并基于连接限制逐步对所述查询语句中的所有表进行连接操作,每一步连接操作得到一个部分查询计划;改变一步或多步所述连接操作中各表之间的连接顺序和/或连接算法,得到与各步所述连接操作相对应的多个不同的部分查询计划;通过价值函数模型对各步的部分查询计划的执行代价进行评估,并基于各步连接操作中执行代价最小的部分查询计划确定最终完整查询计划。通过本发明,解决了相关技术中没有将传统的查询优化方法与深度强化学习的查询优化方法进行结合问题。

    数据存储方法、读取方法、数据库系统、设备及介质

    公开(公告)号:CN117290353A

    公开(公告)日:2023-12-26

    申请号:CN202210699463.6

    申请日:2022-06-20

    Abstract: 本发明实施例提供了数据存储方法、读取方法、数据库系统、设备及介质,其中数据存储方法包括获取索引信息;将索引信息写入内存和磁盘,磁盘将索引信息按照写入时间的先后顺序分层地存储;当内存或存储层的索引信息的数量超过阈值,将当前存储层的索引信息和下一存储层的索引信息进行合并,得到合并索引信息,同步建立与合并索引信息对应的学习索引模型,将合并索引信息替换下一存储层的索引信息;通过对索引数据按照数据冷热程度有序分层存储,以及在合并索引数据的同时建立学习索引模型的手段,有效解决了采用学习索引的数据库系统要求索引信息有序和对索引信息插入不友好的问题。

    调度装置的调度优化方法、调度装置和存储介质

    公开(公告)号:CN115080248A

    公开(公告)日:2022-09-20

    申请号:CN202210998975.2

    申请日:2022-08-19

    Abstract: 本申请公开了一种调度优化方法、调度装置和存储介质,该方法包括:获取调度装置当前的生产环境的信息;获取调度装置当前调度采用的第一调度动作、第一调度策略及其第一参数值;根据生产环境的信息,第一调度动作、第一调度策略及其第一参数值,以及调度性能优化模型,确定调度装置优化后所采用的第二调度动作、第二调度策略及其第二参数值;将待调度工作负载阻塞在调度队列中,将调度装置当前调度所采用的第一调度动作、第一调度策略及所述第一调度策略中的第一参数值替换成第二调度动作、第二调度策略及所述第二调度策略中的第二参数值,解除调度队列的阻塞以进行调度优化。通过这种方式,本申请能够根据生产环境变化进行自适应调度优化。

    写数据的方法及装置
    6.
    发明授权

    公开(公告)号:CN107203331B

    公开(公告)日:2022-05-06

    申请号:CN201610159006.2

    申请日:2016-03-17

    Abstract: 本发明公开了一种写数据的装置,所述写数据的装置包括:第一获取模块,用于写时重定向快照过程中,在未获取到快照生成命令之前,当接收到对源卷的写操作命令时,获取所述写操作命令包含的写入数据的大小信息;写操作模块,用于根据所述写入数据的大小信息从预置的存储区域申请与所述大小信息匹配的存储空间,在申请到的存储空间进行写操作。本发明还公开了一种写数据的方法。本发明实现了写时重定向快照过程中无需读取原存储块的数据,高效写数据的目的。

    一种元数据的处理方法、装置及计算机可读存储介质

    公开(公告)号:CN112181899A

    公开(公告)日:2021-01-05

    申请号:CN201910605081.0

    申请日:2019-07-05

    Abstract: 本文公开了一种元数据的处理方法、装置及计算机可读存储介质,包括:管理服务器获取待处理的元数据;其中,待处理的元数据包括:目录结构和文件属性;根据用于存储文件属性的第一节点的负载情况,按照同一目录的文件属性存储在同一个第一节点的规则在至少一个第一节点上分布存储所述目录结构中目录的文件属性。本申请实现了同一目录的文件在同一个节点上的存储,因此保证了后续分布式系统对于元数据的处理效率。

    容量变更建议方法及装置
    10.
    发明授权

    公开(公告)号:CN106502578B

    公开(公告)日:2019-06-11

    申请号:CN201510698063.3

    申请日:2015-09-06

    CPC classification number: G06F12/08 H04L29/08

    Abstract: 本发明提供了一种容量变更建议方法及装置。其中,方法包括:统计在预设时间段内在数据存储服务器集群上第一存储资源池和第二存储资源池之间双向迁移的次数超过预设迁移数的第三数据分片;根据第三数据分片的数据量,上报对第一存储资源池的容量变更建议。通过本发明,解决了迁移策略由人工进行静态设置导致的业务的访问性能降低的问题,提升业务的访问性能。

Patent Agency Ranking