一种数据处理的方法及装置

    公开(公告)号:CN105094981B

    公开(公告)日:2019-02-12

    申请号:CN201410223152.8

    申请日:2014-05-23

    Abstract: 本发明实施例公开了一种数据处理的方法及装置,涉及通信领域,用以提高数据处理的效率。所述方法,包括:获取待处理任务以及与待处理任务对应的至少一个待处理的数据;为待处理任务分配图形处理器GPU;将待处理任务对应的至少一个待处理数据转换为数据集合类型的数据;将数据集合类型中的数据进行解析,将解析后的数据生成至少一个数据块;将生成的至少一个数据块发送给所述被分配的GPU,以使得GPU根据待处理任务对至少一个数据块进行计算处理。本发明适用于触发加速部件处理数据的场景。

    一种数据处理的方法及装置

    公开(公告)号:CN105094981A

    公开(公告)日:2015-11-25

    申请号:CN201410223152.8

    申请日:2014-05-23

    CPC classification number: G06F9/50

    Abstract: 本发明实施例公开了一种数据处理的方法及装置,涉及通信领域,用以提高数据处理的效率。所述方法,包括:获取待处理任务以及与待处理任务对应的至少一个待处理的数据;为待处理任务分配图形处理器GPU;将待处理任务对应的至少一个待处理数据转换为数据集合类型的数据;将数据集合类型中的数据进行解析,将解析后的数据生成至少一个数据块;将生成的至少一个数据块发送给所述被分配的GPU,以使得GPU根据待处理任务对至少一个数据块进行计算处理。本发明适用于触发加速部件处理数据的场景。

    一种数据处理方法及相关设备

    公开(公告)号:CN104731569A

    公开(公告)日:2015-06-24

    申请号:CN201310719857.4

    申请日:2013-12-23

    CPC classification number: G06F9/541

    Abstract: 本发明实施例公开了一种数据处理方法及相关设备,实现Hadoop从节点设备中对数据自动转换数据格式和自动拼接,简化程序员的编程工作,有利于后续优化MapReduce架构。该方法主要包括:数据预处理器从所述CPU的第一缓冲区读取元数据;所述数据预处理器根据所述元数据所指示的存储地址从所述第一缓冲区读取所述数据集合的数据;所述数据预处理器根据预设解析函数,将所述数据集合的数据转换成所述预设解析函数所指示的数据格式,并将转换后的数据集合生成数据块后存储在所述CPU的第二缓冲区,以使得所述数据拼接器从所述第二缓冲区读取所述数据块拼接到所述GPU。

    一种数据处理方法及相关设备

    公开(公告)号:CN104731569B

    公开(公告)日:2018-04-10

    申请号:CN201310719857.4

    申请日:2013-12-23

    CPC classification number: G06F9/541

    Abstract: 本发明实施例公开了一种数据处理方法及相关设备,实现Hadoop从节点设备中对数据自动转换数据格式和自动拼接,简化程序员的编程工作,有利于后续优化MapReduce架构。该方法主要包括:数据预处理器从所述CPU的第一缓冲区读取元数据;所述数据预处理器根据所述元数据所指示的存储地址从所述第一缓冲区读取所述数据集合的数据;所述数据预处理器根据预设解析函数,将所述数据集合的数据转换成所述预设解析函数所指示的数据格式,并将转换后的数据集合生成数据块后存储在所述CPU的第二缓冲区,以使得所述数据拼接器从所述第二缓冲区读取所述数据块拼接到所述GPU。

    一种传输性能预测模型的训练方法及其相关设备

    公开(公告)号:CN113497732A

    公开(公告)日:2021-10-12

    申请号:CN202010268850.5

    申请日:2020-04-08

    Abstract: 本申请公开了一种传输性能预测模型的训练方法及其相关设备,属于人工智能AI领域,该训练方法包括:在获取到第一训练样本及其第一属性,和第二训练样本及其第二属性之后,利用传输性能预测模型,确定第一训练样本的第一识别特征和第二训练样本的第二识别特征,并根据第一属性与第二属性的相似度、以及第一识别特征与第二识别特征的相似度,确定损失函数,以便后续利用该损失函数更新传输性能预测模型。其中,因属性相似度能够更准确地表征网络中不同训练样本之间的相似程度,使得基于属性相似度确定的损失函数更准确,使得传输性能预测模型能够在损失函数的指导下进行准确地更新,有利于提高传输性能预测模型的预测性能。

    一种预测方法、训练方法、装置及计算机存储介质

    公开(公告)号:CN109905271A

    公开(公告)日:2019-06-18

    申请号:CN201810481548.0

    申请日:2018-05-18

    Abstract: 本申请提供了一种预测方法、训练方法、装置以及计算机可读存储介质。该方法包括:获取目标设备的待预测第一指标数据;将所述待预测第一指标数据输入第一预测模型,得到所述目标设备的预测第二指标数据;将所述预测第二指标数据输入第二预测模型,得到所述目标设备的预测结果,其中,所述第二预测模型根据第二训练数据训练得到,所述第二训练数据包括所述目标设备的第二指标数据和第三指标数据。本申请提供的技术方案可以更准确地体现第一指标数据与第三指标数据之间的函数关系,可以根据待预测的第一指标数据准确地预测出目标设备的预测结果(预测第三指标数据)。

    一种预测方法、训练方法、装置及计算机存储介质

    公开(公告)号:CN109905271B

    公开(公告)日:2021-01-12

    申请号:CN201810481548.0

    申请日:2018-05-18

    Abstract: 本申请提供了一种预测方法、训练方法、装置以及计算机可读存储介质。该方法包括:获取目标设备的待预测第一指标数据;将所述待预测第一指标数据输入第一预测模型,得到所述目标设备的预测第二指标数据;将所述预测第二指标数据输入第二预测模型,得到所述目标设备的预测结果,其中,所述第二预测模型根据第二训练数据训练得到,所述第二训练数据包括所述目标设备的第二指标数据和第三指标数据。本申请提供的技术方案可以更准确地体现第一指标数据与第三指标数据之间的函数关系,可以根据待预测的第一指标数据准确地预测出目标设备的预测结果(预测第三指标数据)。

Patent Agency Ranking