参数配置方法、装置、计算设备、系统及可读存储介质

    公开(公告)号:CN119226257A

    公开(公告)日:2024-12-31

    申请号:CN202310793027.X

    申请日:2023-06-29

    Abstract: 本申请提供一种参数配置方法、装置、计算设备、系统及可读存储介质,涉及大数据领域。该方法包括:针对大数据平台需运行的待执行任务,首先在至少一个已执行任务中确定与该待执行任务的编码距离最近的最邻近任务。然后在大数据平台中将待执行任务的参数配置设置为最邻近任务的参数配置,以使大数据平台使用最邻近任务的配置参数执行该待执行任务。如此,基于待执行任务与已执行任务的快速匹配,利用大数据平台的历史任务的运行信息来得到待执行任务的推荐参数配置,在能够获得使待执行任务执行效率较高的参数的同时,减少对待执行任务进行参数配置优化的耗时。

    执行业务的方法、装置、终端和存储介质

    公开(公告)号:CN112181915B

    公开(公告)日:2023-12-08

    申请号:CN201910595847.1

    申请日:2019-07-03

    Inventor: 罗旦

    Abstract: 本公开是关于一种执行业务的方法、装置、终端和存储介质,属于互联网技术领域。所述方法包括:通过RDMA原子操作,指示服务器执行目标业务;在确定服务器执行完毕目标业务之后,按照预设的检测时间点确定规则,确定向服务器获取业务执行进度标志的至少一个检测时间点;每当到达任一检测时间点时,通过RDMA原子操作,向服务器获取业务执行进度标志,确定业务执行进度标志未进行更新的时长,如果未进行更新的时长大于预设时长阈值,则通过RDMA原子操作,对业务执行进度标志进行进位更新。采用本公开,即使存在出现了运行故障的终端,标志更新顺序标识指示的顺序在后的其他终端也可以

    一种物化视图的方法以及相关设备

    公开(公告)号:CN115827663A

    公开(公告)日:2023-03-21

    申请号:CN202111088864.X

    申请日:2021-09-16

    Inventor: 罗旦

    Abstract: 本申请实施例公开了一种物化视图的方法以及相关设备,用于提高物化后的视图被查询的概率。本申请实施例方法包括:基于历史的视图查询情况确定多个第一历史视图,每个第一历史视图皆存在对应的特征信息,特征信息用于指示视图的数据构成情况。查询第一视图,并确定存在目标历史视图,目标历史视图的特征信息与第一视图的特征信息具有匹配关系。若第一视图不存在对应的物化视图,则创建所述第一视图的物化视图。

    存储系统中存储设备的管理方法及装置

    公开(公告)号:CN110199512A

    公开(公告)日:2019-09-03

    申请号:CN201780002717.1

    申请日:2017-12-26

    Abstract: 本方案公开了一种存储系统中存储设备的管理方法,客户端可以根据获取访问请求指向的NVMe存储设备的队列的起始地址以及访问请求指向的NVMe存储设备的逻辑地址,向NVMe存储设备所在的存储节点发送远程直接内存访问命令,从而充分发挥了NVMe存储设备的性能,提高了存储系统的写性能。

    一种使用网络设备进行数据查询的系统、方法、及装置

    公开(公告)号:CN119046522A

    公开(公告)日:2024-11-29

    申请号:CN202410890033.1

    申请日:2020-12-29

    Abstract: 本申请提供一种使用网络设备进行数据查询的系统、方法、及装置。所述系统的中心节点通过网络设备连接至工作节点。所述网络设备例如为网卡、交换机、路由器等。中心节点将用户输入的查询请求生成多个任务。在为所述多个任务分配执行设备的时候,中心节点会将一些任务的执行设备配置为网络设备,一些任务的执行设备配置为工作节点,然后发送配置指令至所配置的网络设备及工作节点,以在网络设备及工作节点上设置为其配置的任务。配置完成后,由于工作节点与中心节点之间传输的数据都要经过网络设备,所以网络设备会对经过的数据执行所设置的任务,从而以减少工作节点的运算量,减轻工作节点上处理器的负担并加速数据处理。

    一种数据查询的方法及其相关设备

    公开(公告)号:CN113901072A

    公开(公告)日:2022-01-07

    申请号:CN202010577243.7

    申请日:2020-06-22

    Abstract: 本申请实施例提供了一种数据查询的方法及其相关设备,其中,该方法包括:获取数据查询指令,数据查询指令包括第一过滤条件;基于第一过滤条件,获取第一数据;若存在已存储的第二过滤条件,则基于第二过滤条件获取第二数据,其中,第二过滤条件与第一过滤条件相关联;将第一数据和第二数据进行连接操作,得到第三数据,并输出第三数据。本申请实施例中,服务器在获取数据查询指令后,可基于第一过滤条件和第二过滤条件针对性地分别获取有效的第一数据和第二数据,从而对第一数据和第二数据进行连接操作得到用户所需查询的第三数据,该过程中可避免无效的数据获取,可减少数据读出操作和数据写入操作,降低数据传输开销。

    一种数据查询方法及装置
    8.
    发明公开

    公开(公告)号:CN113138962A

    公开(公告)日:2021-07-20

    申请号:CN202010063229.5

    申请日:2020-01-19

    Inventor: 罗旦

    Abstract: 一种数据查询方法及装置,涉及数据查询技术领域,能够解决系统资源的有效利用率低和查询效率低的问题。数据查询装置在接收到用于请求查询数据表中的目标数据(第一字段的取值位于第一取值范围的数据)的查询请求后,确定m个子范围(第一字段的取值范围被划分为m个子范围)中与第一取值范围存在交集的n个子范围,并获取目标文件的标识(包括n个子范围中每个子范围对应的文件的标识,每个子范围对应的文件为数据表的一部分),以及向工作节点发送目标文件的标识,指示获取目标数据。数据查询装置无需从数据表包括的每个文件中获取目标数据,提高了查询效率和系统资源的利用率。

    存储系统中存储设备的管理方法及装置

    公开(公告)号:CN110199512B

    公开(公告)日:2020-12-22

    申请号:CN201780002717.1

    申请日:2017-12-26

    Abstract: 本方案公开了一种存储系统中存储设备的管理方法,客户端可以根据获取访问请求指向的NVMe存储设备的队列的起始地址以及访问请求指向的NVMe存储设备的逻辑地址,向NVMe存储设备所在的存储节点发送远程直接内存访问命令,从而充分发挥了NVMe存储设备的性能,提高了存储系统的写性能。

    资源管理方法、资源分配方法、装置、设备及存储介质

    公开(公告)号:CN118245203A

    公开(公告)日:2024-06-25

    申请号:CN202211667780.6

    申请日:2022-12-22

    Inventor: 罗旦 张巍

    Abstract: 本申请提供了一种资源管理方法、资源分配方法、装置、设备及存储介质。该方法包括:根据任务的身份标识、分配给任务的计算资源所在的执行环境和每种执行环境中需要分配给任务的计算资源的总数量和资源管理信息,确定用于执行任务的至少一个计算节点和至少一个计算节点中的每个计算节点中每种执行环境中需要分配给任务的计算资源的数量;向每个计算节点发送第一指令,以使计算节点在分配给任务的计算资源所在的执行环境包括TEE的情况下,运行REE中TEE的客户端应用程序和TEE中的可信应用程序,TEE中的可信应用程序向TEE的客户端应用程序发送用于执行任务的计算资源的身份标识。如此,资源管理节点能够通过REE与TEE进行通信,从而完成资源的统一管理和调度。

Patent Agency Ranking