-
公开(公告)号:CN119806787A
公开(公告)日:2025-04-11
申请号:CN202510287888.X
申请日:2025-03-12
Applicant: 鹏城实验室
Abstract: 本申请实施例公开一种计算任务分配方法、装置、计算机设备及存储介质。根据第一算力平台第一算力平台发送的计算任务处理请求确定待处理计算任务;在多个算力平台中确定用于执行待处理计算任务的第二算力平台;当第二算力平台未安装预设数据资源访问工具时,将预设数据资源访问工具发送至第二算力平台,使第二算力平台安装预设数据资源访问工具;将待处理计算任务发送至第二算力平台,使第二算力平台通过预设数据资源访问工具访问第一算力平台相应存储路径中待处理计算任务的目标数据;接收第二算力平台根据目标数据执行待处理计算任务的任务处理结果,通过预设数据资源访问工具将任务处理结果发送至第一算力平台。实现算力平台之间的算力共享。
-
公开(公告)号:CN114386384B
公开(公告)日:2024-03-19
申请号:CN202111482009.7
申请日:2021-12-06
Applicant: 鹏城实验室
IPC: G06F40/194 , G06F16/2458
Abstract: 本发明公开了一种大规模长文本数据的近似重复检测方法、系统及终端,通过将传统数据库中的倒排索引结构引入到分布式计算框架中,实现了文档相似检测的分布式分区,并且通过倒排表分区方式实现Simhash技术的分布式计算,为其带来可扩展性,最后通过在计算过程中嵌入传统数据库领域的前缀剪枝技术,来进一步减少分布式重复检测过程中倒排分区的通讯读写代价和simhash计算的验证代价。
-
公开(公告)号:CN115495048A
公开(公告)日:2022-12-20
申请号:CN202210923679.6
申请日:2022-08-02
Applicant: 鹏城实验室
Abstract: 本发明公开了基于多计算平台的AI在线交互式开发方法及相关设备,所述方法包括:交互式开发平台接收开发任务请求后选择适配的智算中心资源;根据平台调度策略选择适配智算中心,并获取适配智算中心的智能计算平台的授权信息;以及根据适配智算中心的API接口要求将开发任务请求进行封装;智能计算平台根据分配资源环境请求分配开发任务请求所需的资源和环境,并发送访问资源链接至交互式开发平台;交互式开发平台将访问资源链接与开发任务请求进行关联,并将访问资源链接发送至注册用户。通过建立统一的交互式开发平台,接入多个智能计算平台并通过互联网面向用户提供AI交互式开发环境,提高了开发的便利性和降低了开发成本。
-
公开(公告)号:CN114386384A
公开(公告)日:2022-04-22
申请号:CN202111482009.7
申请日:2021-12-06
Applicant: 鹏城实验室
IPC: G06F40/194 , G06F16/2458
Abstract: 本发明公开了一种大规模长文本数据的近似重复检测方法、系统及终端,通过将传统数据库中的倒排索引结构引入到分布式计算框架中,实现了文档相似检测的分布式分区,并且通过倒排表分区方式实现Simhash技术的分布式计算,为其带来可扩展性,最后通过在计算过程中嵌入传统数据库领域的前缀剪枝技术,来进一步减少分布式重复检测过程中倒排分区的通讯读写代价和simhash计算的验证代价。
-
-
-