-
公开(公告)号:CN116069510B
公开(公告)日:2023-07-04
申请号:CN202310214005.3
申请日:2023-03-08
Applicant: 天津南大通用数据技术股份有限公司
Abstract: 本申请涉及一种数据处理方法、装置、电子设备和存储介质,应用于计算机技术领域,其中,该方法应用于计算引擎,所述计算引擎中包括一组算子,方法包括:将待处理数据进行切分,得到N份切分数据,其中,N为大于1的整数;对所述一组算子进行复制,得到M组算子,其中,M为大于1的整数;将所述切分数据分发至每组算子中。以解决现有技术中,采用算子内并行的方式,每次的互斥访问会造成计算引擎耗费较多的时间进行互斥运算,从而使得处理效率较低的问题。
-
公开(公告)号:CN116069510A
公开(公告)日:2023-05-05
申请号:CN202310214005.3
申请日:2023-03-08
Applicant: 天津南大通用数据技术股份有限公司
Abstract: 本申请涉及一种数据处理方法、装置、电子设备和存储介质,应用于计算机技术领域,其中,该方法应用于计算引擎,所述计算引擎中包括一组算子,方法包括:将待处理数据进行切分,得到N份切分数据,其中,N为大于1的整数;对所述一组算子进行复制,得到M组算子,其中,M为大于1的整数;将所述切分数据分发至每组算子中。以解决现有技术中,采用算子内并行的方式,每次的互斥访问会造成计算引擎耗费较多的时间进行互斥运算,从而使得处理效率较低的问题。
-