一种面向大数据的并行系统优化方法

    公开(公告)号:CN106814994B

    公开(公告)日:2019-02-19

    申请号:CN201710045825.9

    申请日:2017-01-20

    Abstract: 一种面向大数据的并行系统优化方法,本发明涉及面向大数据的并行系统优化方法。本发明的目的是为了解决现有技术都是针对某一特定的算法,没有针对复杂算式,且计算耗时长的问题。具体过程为:步骤一:将数据密集型算式进行抽象化处理;步骤二:将步骤一抽象化处理后的数据密集型算式生成算式语义树;步骤三:将步骤二生成的语义树进行化简并生成算式依赖图;步骤四:将步骤三生成的算式依赖图进行分层并生成任务序列;步骤五:根据步骤四生成的任务序列在并行系统中生成任务依赖关系,执行后得到数据密集型算式的计算结果。本发明用于数据分析领域。

    一种面向大数据的并行系统优化方法

    公开(公告)号:CN106814994A

    公开(公告)日:2017-06-09

    申请号:CN201710045825.9

    申请日:2017-01-20

    CPC classification number: G06F9/3001 G06F9/3893 G06F9/465

    Abstract: 一种面向大数据的并行系统优化方法,本发明涉及面向大数据的并行系统优化方法。本发明的目的是为了解决现有技术都是针对某一特定的算法,没有针对复杂算式,且计算耗时长的问题。具体过程为:步骤一:将数据密集型算式进行抽象化处理;步骤二:将步骤一抽象化处理后的数据密集型算式生成算式语义树;步骤三:将步骤二生成的语义树进行化简并生成算式依赖图;步骤四:将步骤三生成的算式依赖图进行分层并生成任务序列;步骤五:根据步骤四生成的任务序列在并行系统中生成任务依赖关系,执行后得到数据密集型算式的计算结果。本发明用于数据分析领域。

Patent Agency Ranking