基于超融合架构的数据调取方法、装置、电子设备及介质

    公开(公告)号:CN113157406A

    公开(公告)日:2021-07-23

    申请号:CN202110255269.4

    申请日:2021-03-09

    Abstract: 本发明涉及数据处理领域,提供了一种基于超融合架构的数据调取方法、装置、电子设备及介质,该方法包括接收客户端上传的第一数据,对第一数据进行备份得到第二数据,为第一数据与第二数据分配相同的预设标签,将第一数据存储至一级存储,将第二数据存储至二级存储,接收客户端发起的数据调取请求,根据预设标签对存储有第一数据的数据节点进行数据访问,并判断是否与数据节点成功建立数据连接,当判断无法成功连接数据节点时,与二级存储建立数据连接,并从中调取与所述预设标签对应的目标数据返回客户端。本发明在不影响服务器内部存储资源的前提下,避免数据丢失,以及避免在服务器内部数据节点出现故障时无法进行数据调取。

    基于超融合架构的数据管理方法、系统、电子设备及介质

    公开(公告)号:CN112905718A

    公开(公告)日:2021-06-04

    申请号:CN202110255272.6

    申请日:2021-03-09

    Abstract: 本发明涉及数据处理领域,提供了一种基于超融合架构的数据管理方法、系统、电子设备及介质,该方法包括在服务器部署分别连接若干客户端与分层资源管理平台的超融合架构;提取各个存储数据的标签,将属于相同标签的存储数据归为一类并存储至与存储数据类别对应的数据节点;实时接收客户端发起的数据调取请求,根据待调取数据的类别从分层资源管理平台调取对应的存储数据发送客户端;统计每类待调取数据的调取频率,将存储数据按照不同的调取频率存储至不同类别的数据存储模块。本发明通过分层资源管理平台对存储数据分层管理,便于管理大量的数据资源,使得在进行数据浏览和数据调取时,系统的运行速度更快,在进行数据检索和获取时,准确性更高。

    数据请求处理方法、装置、计算机设备和存储介质

    公开(公告)号:CN112818021A

    公开(公告)日:2021-05-18

    申请号:CN202110200896.8

    申请日:2021-02-23

    Abstract: 本申请涉及一种数据请求处理方法、装置、计算机设备和存储介质。方法包括:获取任务处理列表;根据任务处理列表,依次执行当前周期内所对应的任务处理指令,并将任务处理指令和相对应的任务处理结果关联缓存至缓存空间;在对当前周期内的任务处理指令全部执行完成后,将缓存空间中关联缓存的任务处理指令和任务处理结果写入数据库;接收客户端发起的结果查询指令,结果查询指令中携带有与当前客户端在先发出的任务处理指令相对应的目标请求信息;根据目标请求信息,从数据库中获取与目标请求信息相对应的目标任务处理结果反馈至客户端。采用本方法能够有效缓解处理多个定时任务时数据库负担过重的问题。

    数据请求处理方法、装置、计算机设备和存储介质

    公开(公告)号:CN112818021B

    公开(公告)日:2024-02-02

    申请号:CN202110200896.8

    申请日:2021-02-23

    Abstract: 本申请涉及一种数据请求处理方法、装置、计算机设备和存储介质。方法包括:获取任务处理列表;根据任务处理列表,依次执行当前周期内所对应的任务处理指令,并将任务处理指令和相对应的任务处理结果关联缓存至缓存空间;在对当前周期内的任务处理指令全部执行完成后,将缓存空间中关联缓存的任务处理指令和任务处理结果写入数据库;接收客户端发起的结果查询指令,结果查询指令中携带有与当前客户端在先发出的任务处理指令相对应的目标请求信息;根据目标请求信息,从数据库中获取与目标请求信息相对应的目标任务处理结果反馈至客户端。采用本方法能够有效缓解处理多个定时任务时数据库负担过重的问题。(56)对比文件杨霄翼.基于Python的“地理处理”并行方案.地理信息世界.2017,(06),第125-129页.薛安荣,鲍培德.基于数据库的协同CAD系统设计.江苏理工大学学报.2000,(03),第72-75页.

Patent Agency Ranking