机器学习模型的分布式训练方法及装置、电子设备、介质

    公开(公告)号:CN113487036B

    公开(公告)日:2022-06-17

    申请号:CN202110704799.2

    申请日:2021-06-24

    Applicant: 浙江大学

    Abstract: 本发明公开了一种机器学习模型的分布式训练方法及装置、电子设备、介质,该方法采用梯度键值对表示所述梯度向量中的非零元素;保留绝对值大于设定阈值的所述梯度值;通过倒数映射的方式,将保留的梯度值转化为梯度倒数值;将所述梯度倒数值进行对数量化,得到梯度量化整数,作为压缩的梯度值;根据保留的梯度值对应的梯度键求相邻梯度键的增量,获得增量梯度键;根据所述增量梯度键,得到长度标志位;对所述增量梯度键根据对应长度标志位进行二进制编码,组合长度标志位和二进制编码得到压缩的梯度键;再将所述压缩的梯度值和梯度键用于节点间传输,降低了各节点传输的梯度数据通信量,进而达到了提升机器学习模型分布式训练效率的技术效果。

    一种环保型物理交联自润滑水凝胶及其制备方法

    公开(公告)号:CN112694621B

    公开(公告)日:2022-04-01

    申请号:CN202011556917.1

    申请日:2020-12-24

    Applicant: 浙江大学

    Abstract: 本发明公开了一种具有物理交联自润滑水凝胶及其制备方法,包括如下步骤:将水与保水剂混合得到混合溶剂;将混合溶剂加热,然后加入聚乙烯醇和表面活性剂,搅拌溶解,得到聚乙烯醇/表面活性剂混合溶液;将混合溶液倒入模具中,经循环冷冻熔融成型后,脱模并在水中浸泡至水凝胶尺寸稳定的平衡状态,期间多次更换水,即得到所述的环保型聚乙烯醇物理交联自润滑水凝胶。本发明采用原料均无生物毒性,成本低,反应条件温和、工艺安全、简单,符合环保要求。将表面活性剂引入物理交联聚乙烯醇水凝胶中,表面活性剂的疏水部分暴露于聚乙烯醇水凝胶表面,降低凝胶的表面张力,从而降低凝胶的摩擦力,有利于产物应用到人工关节软骨置换材料中。

    机器学习模型的分布式训练方法及装置、电子设备、介质

    公开(公告)号:CN113487036A

    公开(公告)日:2021-10-08

    申请号:CN202110704799.2

    申请日:2021-06-24

    Applicant: 浙江大学

    Abstract: 本发明公开了一种机器学习模型的分布式训练方法及装置、电子设备、介质,该方法采用梯度键值对表示所述梯度向量中的非零元素;保留绝对值大于设定阈值的所述梯度值;通过倒数映射的方式,将保留的梯度值转化为梯度倒数值;将所述梯度倒数值进行对数量化,得到梯度量化整数,作为压缩的梯度值;根据保留的梯度值对应的梯度键求相邻梯度键的增量,获得增量梯度键;根据所述增量梯度键,得到长度标志位;对所述增量梯度键根据对应长度标志位进行二进制编码,组合长度标志位和二进制编码得到压缩的梯度键;再将所述压缩的梯度值和梯度键用于节点间传输,降低了各节点传输的梯度数据通信量,进而达到了提升机器学习模型分布式训练效率的技术效果。

    一种基于超图的图像检索与标注方法

    公开(公告)号:CN107145519B

    公开(公告)日:2020-07-03

    申请号:CN201710229126.X

    申请日:2017-04-10

    Applicant: 浙江大学

    Abstract: 本发明公开了一种基于超图的图像检索与标注方法。本发明利用超图理论,有效组织社交图像的评论关系、标注关系和视觉相似关系;利用批量、并行和缓冲技术,提升超图转移概率矩阵的计算效率;利用结点排名得分上下界估计和近似方法,提升查询效率;利用用户反馈,提高查询质量。本方法根据图像视觉特征生成图像t‑NN图并结合图像的社交关联信息,建立超图模型,计算转移概率矩阵并存储到B+树;进行并行个性化PageRank查询,依据上下界估计筛选候选点集合并进行排序;最后根据用户反馈,再次进行查询,优化查询结果。本发明能有效地组织各种多维关系,并极大地提升了转移概率矩阵的计算效率和查询效率,且查询质量好于现有方法,提供了最佳性能。

    一种基于发布/订阅模式的分布式度量相似查询处理方法

    公开(公告)号:CN107273464B

    公开(公告)日:2020-05-12

    申请号:CN201710408855.1

    申请日:2017-06-02

    Applicant: 浙江大学

    Abstract: 本发明公开了一种基于发布/订阅模式的分布式度量相似查询处理方法。在系统构建阶段,本发明将给定的度量空间数据集通过支枢点映射至向量空间;在分布式系统中,首先利用基于KD树的划分技术将数据划分到各个节点;其次各个节点建立局部索引并统计内部数据信息;最后各个节点组织成树形结构。在处理相似查询请求时,本发明在发布/订阅模式下,将查询请求作为任务发布到分布式系统中;各个工作节点利用基于相交的方法判断、订阅属于自己职责范围的任务,而后对其进行处理,将查询结果返回给用户。本发明充分利用了数据库中的索引、查询技术,采用统一的方法来处理度量相似查询,丰富和优化了分布式环境下的相似查询处理方法。

    一种基于发布/订阅模式的分布式度量相似查询处理方法

    公开(公告)号:CN107273464A

    公开(公告)日:2017-10-20

    申请号:CN201710408855.1

    申请日:2017-06-02

    Applicant: 浙江大学

    Abstract: 本发明公开了一种基于发布/订阅模式的分布式度量相似查询处理方法。在系统构建阶段,本发明将给定的度量空间数据集通过支枢点映射至向量空间;在分布式系统中,首先利用基于KD树的划分技术将数据划分到各个节点;其次各个节点建立局部索引并统计内部数据信息;最后各个节点组织成树形结构。在处理相似查询请求时,本发明在发布/订阅模式下,将查询请求作为任务发布到分布式系统中;各个工作节点利用基于相交的方法判断、订阅属于自己职责范围的任务,而后对其进行处理,将查询结果返回给用户。本发明充分利用了数据库中的索引、查询技术,采用统一的方法来处理度量相似查询,丰富和优化了分布式环境下的相似查询处理方法。

    一种空间数据库中排序反向轮廓查询方法

    公开(公告)号:CN103778195B

    公开(公告)日:2017-01-18

    申请号:CN201410007280.9

    申请日:2014-01-07

    Applicant: 浙江大学

    Abstract: 本发明公开了一种空间数据库中排序反向轮廓查询方法。选用了广泛使用的R树对查询集建立索引;在此基础上本发明首先开发了排序反向轮廓过滤引擎,得到最终结果的一个上限;接着开发了开发基于动态轮廓裁剪和全局轮廓裁剪的排序反向轮廓裁剪引擎,来消除其中错误的命中;最后开发了排序引擎对查询结果进行合并,并按顺序得到最终的查询结果。

    一种面向多源异构数据的冲突消除查询方法及装置

    公开(公告)号:CN118484542B

    公开(公告)日:2025-05-16

    申请号:CN202410566416.3

    申请日:2024-05-09

    Applicant: 浙江大学

    Abstract: 本发明公开了一种面向多源异构数据的冲突消除查询方法及装置,该方法将异构数据源中每份数据集和用户查询转换为数据图谱和查询图谱;将数据图谱和查询图谱转化为线图表;根据查询线图中节点的语义信息和网络结构,从所有数据线图中分别找出与查询线图节点语义匹配以及网络结构匹配的所有节点;获得同时满足语义匹配和网络结构匹配的节点,得到与查询图谱中的待查实体相匹配的实体形成候选查询结果;为数据源中每份数据集和候选查询结果中各个实体分配初始可信度;根据候选查询结果和各个数据源历史查询结果,迭代估计数据源可信度和数据可信度,直到收敛;根据收敛后的数据可信度,选择候选查询结果中可信度最高的实体作为查询结果输出。

    一种基于大模型的物化视图选择方法及系统

    公开(公告)号:CN118916385B

    公开(公告)日:2025-04-22

    申请号:CN202411415715.3

    申请日:2024-10-11

    Applicant: 浙江大学

    Abstract: 本发明提供了一种基于大模型的物化视图选择方法及系统,包含了执行计划解析策略、查询聚类算法、检索增强策略,通过利用大模型的先验知识,将同类型的查询借助提示词向大模型提问,得到物化视图和改写后的查询,并通过分析纠错模块解析结果的正确性,最后通过物化视图选择模块得到最终结果。一方面,本发明利用物化视图相关领域微调大模型,捕捉查询和视图之间的关系,以适应各场景物化视图的生成;另一方面,本发明通过检索增强机制,从向量数据库搜索符合当前场景的提示词示例,促进在不同场景下的模型表现,从而提高大模型的响应,得到更优的结果。

Patent Agency Ranking