一种数据处理方法以及相关装置
    1.
    发明公开

    公开(公告)号:CN118153708A

    公开(公告)日:2024-06-07

    申请号:CN202410236114.X

    申请日:2024-02-29

    Abstract: 本申请提供一种人工智能领域的数据处理方法以及相关装置,用于对神经网络模型中的数据划分以及网络层划分进行联合优化,从而降低神经网络模型并行训练时长。该方法包括:基于第一数据分区数,对神经网络模型中多个网络层进行划分,得到神经网络模型的网络层划分结果;基于网络层划分结果,确定第二数据分区数,第二数据分区数对应的神经网络模型的训练时长小于第一预设值;比较第一训练时长与第二训练时长的大小,得到比较结果,第一训练时长为根据第一数据分区数以及网络层划分结果计算得到,第二训练时长为根据第二数据分区数以及网络层划分结果计算得到;根据比较结果,确定神经网络模型的目标数据分区数以及目标网络层划分结果。

Patent Agency Ranking