公开(公告)号：CN117909371A

公开(公告)日：2024-04-19

申请号：CN202410308246.9

申请日：2024-03-18

Applicant: 之江实验室

Inventor： 刘晓宇 ,  曾令仿 ,  李勇 ,  韩珂

IPC: G06F16/2455 ,  G06F16/23 ,  G06F18/214 ,  G06N20/00

Abstract: 本说明书公开了一种模型训练方法、装置、存储介质及电子设备。在此方法中，每轮训练时，确定对目标模型执行该轮训练任务时所要使用的训练样本的数据标识，并判断要使用的训练样本的数据标识是否存储在预设的数据列表中，若是，则从预设的缓存中查询该数据标识对应的训练样本，通过获取到的训练样本对目标模型进行训练，否则，根据该数据标识向预设的数据库发送数据获取请求，并通过获取到的训练样本对目标模型进行训练，根据该轮训练时使用的训练样本的使用次数，对预设的数据列表中存储的数据标识进行更新，以根据更新后的数据列表，对预设的缓存中的训练样本进行更新，并通过预设的缓存中更新后的训练样本，对目标模型进行下一轮训练。

公开(公告)号：CN117312394A

公开(公告)日：2023-12-29

申请号：CN202311481292.0

申请日：2023-11-08

Applicant: 之江实验室

Inventor： 韩珂 ,  李勇 ,  曾令仿 ,  刘晓宇

IPC: G06F16/2455 ,  G06F16/22 ,  G06F18/214 ,  G06F18/30 ,  G06N3/063

Abstract: 本说明书公开了一种数据访问方法、装置、存储介质及电子设备，通过第一缓存和第二缓存分别缓存原始样本和处理样本，当接受到模型训练请求后，随机确定一个样本标识，根据样本标识在第一缓存和第二缓存中寻找该样本标识对应的训练样本。若第一缓存和第二缓存均未被命中时，在第一缓存和第二缓存中确定未被命中过的训练样本中选择一个并返回，经增强计算后确定最终增强样本，用于模型训练。若第一缓存和第二缓存中的训练样本均被命中时，从存储器中获取一个训练样本返回。本方法在保证了训练样本选择的随机性的情况下，提高了缓存命中率，减少CPU冗余计算，并减少了对输入输出接口资源的调用，使得训练过程耗时减少，效率增高。