-
公开(公告)号:CN114218929A
公开(公告)日:2022-03-22
申请号:CN202210159700.X
申请日:2022-02-22
Applicant: 之江实验室
IPC: G06F40/253 , G06F40/284 , G06K9/62
Abstract: 一种基于元算子融合的多平台算子智能化开发系统及方法,包括:初始化器、元算子库预处理器、算子模板生成器、融合规则迭代器、算子融合器、调度策略优化器;初始化器:用于获取系统中内置的融合规则库和对应的元算子接口声明,然后将元算子接口声明转发到元算子库预处理器,将融合规则库转发到融合规则迭代器;由于算子融合器能够根据融合规则和对应的目标平台元算子,来生成目标平台的算子代码,和融合规则平台无关且易于描述,元算子的逻辑比较简单而且可以复用于多个算子。因此,本发明降低了算子开发的工程量和开发难度,且用户需要开发的算子越多,需要适配的平台越多,本发明的效果越明显。
-
公开(公告)号:CN114186687A
公开(公告)日:2022-03-15
申请号:CN202210144108.2
申请日:2022-02-17
Applicant: 之江实验室
Abstract: 本发明公开了一种面向神经网络模型计算的中间表示方法和装置,包括如下步骤:S1:解析输入的模型文件以获取神经网络的拓扑结构信息;S2:构建逻辑计算图;S21:推导逻辑计算图中每个算子的物理布局信息;S22:推导逻辑计算图中每个算子的元属性;S23:推导逻辑计算图中每个算子的输入输出逻辑张量的描述信息;S3:构建物理计算图;S31:生成物理计算图;等步骤,本发明公开的基于元属性的用于神经网络模型计算的中间表示从算子层面原生地支持数据并行和模型并行以及流水并行。本发明公开的面向神经网络模型计算的中间表示方法和装置以计算表达式为基本单元,以张量作为整个计算表达式组成的计算图中流动的数据,以构图的方式实现神经网络模型的计算过程。
-
公开(公告)号:CN114064967A
公开(公告)日:2022-02-18
申请号:CN202210052687.8
申请日:2022-01-18
Applicant: 之江实验室
IPC: G06F16/735 , G06F16/78 , G06F16/783 , G06N3/04 , G06N3/08 , H04N19/149 , H04N19/21
Abstract: 本发明公开了多粒度级联交互网络的跨模态时序行为定位方法及装置,用于解决未修剪视频中基于给定文本查询的时序行为定位问题。本发明实施一种新的多粒度级联跨模态交互网络,以由粗到细的方式进行级联跨模态交互,用以提升模型的跨模态对齐能力。此外,本发明引入了一种局部‑全局上下文感知的视频编码器(local‑global context‑aware video encoder),用于提升视频编码器的上下文时序依赖建模能力。本发明实现方法简单,手段灵活,在提升视觉‑语言跨模态对齐精度方面具有优势,且训练所得模型在成对的视频‑查询测试数据上可显著提升时序定位准确度。
-
公开(公告)号:CN114022703A
公开(公告)日:2022-02-08
申请号:CN202111248733.3
申请日:2021-10-26
IPC: G06V10/764 , G06V10/774 , G06V10/82 , G06K9/62 , G06N3/04 , G06N3/08
Abstract: 本发明公开了一种基于深度学习的高效车辆细粒度识别方法,它通过构建高效残差结构提取车辆图像特征,然后通过空间通道损失函数提高特征提取网络的细粒度分类能力,使网络更加专注于车辆图像的不同组件区域,保证特征通道的可区分性和可辨别性,并且不增加卷积神经网络推理的计算量。本发明通过深度学习自动提取特征,避免手工设计特征区域的局限性,更能克服车辆图片复杂环境噪音的干扰,并且能通过空间特征损失函数使特征通过关注更丰富的特征区域,提高车辆细粒度识别的准确率。
-
公开(公告)号:CN113836386A
公开(公告)日:2021-12-24
申请号:CN202111410689.1
申请日:2021-11-25
Applicant: 之江实验室
IPC: G06F16/953 , G06F21/64 , H04L9/32
Abstract: 本发明提供了一种并行模式搜索空间构造系统和方法,该方法为:初始化输入逻辑张量;计算并输出逻辑张量真值;构造所有候选并行模式,确定输入和输出张量并行模式迭代内容;结合输入张量并行模式迭代内容,切分输入逻辑张量为物理张量;判断物理张量计算合法性,若合法,计算物理张量结果并输出;若非法,继续输入张量并行模式迭代过程;结合输出张量并行模式迭代内容,合并物理张量运算结果为逻辑张量;对比逻辑张量真值和逻辑张量,若相等,将该并行模式添加到合法并行模式搜索空间中,并直接继续输入张量并行模式迭代过程;若不相等,继续输出张量并行模式迭代过程,直到迭代完成后,重复所述以上步骤,直到所述输入张量并行模式迭代过程完成。
-
公开(公告)号:CN113035026A
公开(公告)日:2021-06-25
申请号:CN202110259767.6
申请日:2021-03-10
Applicant: 之江实验室
IPC: G09B21/00
Abstract: 本发明公开了一种盲文信息无障碍的视听触感知匹配方法。遍历初始的文本和初始的点序,每次从初始的文本中读取37个字节作为文本文件,从初始的点序中读取126字节作为点序文件;然后根据点序文件的第20方和第21方各自是否是空方的情况进行判断和不同处理,而对点序文件和文本文件截取文本和点序处理,并存储形成最终的文本文件和最终的点序文件。本发明能够实现文字、声音和盲文点位的视觉、听觉和触觉的多感知信息匹配同步呈现,能够实现文本文件和点序文件的内容相互对应,使得盲文学习机输出相同内容的视觉刺激、听觉刺激和触觉刺激,解决目前基于纸质书籍的盲文学习方法只能提供盲文点位的触觉刺激,存在不便携、不易用、内容陈旧等问题。
-
公开(公告)号:CN112486630A
公开(公告)日:2021-03-12
申请号:CN202011375644.0
申请日:2020-11-30
Applicant: 之江实验室 , 北京一流科技有限公司
Abstract: 本发明公开了一种分布式训练部署系统。所述系统包括:从容器创建组件,基于用户输入的分布式任务创建申请包含的资源清单创建从容器集,并确认所创建的从容器处于可备用状态;主容器创建组件,基于用户输入的资源清单创建主容器,并确认所创建的主容器处于可备用状态;容器IP获取组件,获取所创建的主容器和从容器的IP,并基于所获取的IP创建JS对象简谱文件,并将该JS对象简谱文件写入所有主容器和从容器的指定位置;以及免密认证组件,通过对属于同一分布式任务的主容器和从容器配置安全密钥和认证信息,建立主容器和从容器之间的网络通讯的SSH免密认证。
-
公开(公告)号:CN111767711B
公开(公告)日:2020-12-08
申请号:CN202010910566.3
申请日:2020-09-02
Applicant: 之江实验室
IPC: G06F40/211 , G06F40/30 , G06K9/62 , G06N5/02 , G06N20/00
Abstract: 本发明公开了一种基于知识蒸馏的预训练语言模型的压缩方法及平台,该方法首先设计一种普适的特征迁移的知识蒸馏策略,在教师模型的知识蒸馏到学生模型的过程中,将学生模型每一层的特征映射逼近教师的特征,重点关注小样本在教师模型中间层特征表达能力,并利用这些特征指导学生模型;然后利用教师模型的自注意力分布具有检测词语之间语义和句法的能力构建一种基于自注意力交叉知识蒸馏方法;最后为了提升学习模型训练前期的学习质量和训练后期的泛化能力,设计了一种基于伯努利概率分布的线性迁移策略逐渐完成从教师到学生的特征映射和自注意分布的知识迁移。通过本发明,将面向多任务的预训练语言模型进行自动压缩,提高语言模型的压缩效率。
-
公开(公告)号:CN114022703B
公开(公告)日:2025-04-04
申请号:CN202111248733.3
申请日:2021-10-26
IPC: G06V10/764 , G06V10/774 , G06V10/82 , G06N3/0464 , G06N3/09
Abstract: 本发明公开了一种基于深度学习的高效车辆细粒度识别方法,它通过构建高效残差结构提取车辆图像特征,然后通过空间通道损失函数提高特征提取网络的细粒度分类能力,使网络更加专注于车辆图像的不同组件区域,保证特征通道的可区分性和可辨别性,并且不增加卷积神经网络推理的计算量。本发明通过深度学习自动提取特征,避免手工设计特征区域的局限性,更能克服车辆图片复杂环境噪音的干扰,并且能通过空间特征损失函数使特征通过关注更丰富的特征区域,提高车辆细粒度识别的准确率。
-
公开(公告)号:CN116360586A
公开(公告)日:2023-06-30
申请号:CN202310120593.4
申请日:2023-02-09
Applicant: 之江实验室
Abstract: 本发明公开了一种基于微纳光纤手环式传感器的人机交互手势识别系统和方法,包括微纳光纤手环式传感器、相机、计算设备,微纳光纤手环式传感器用于通过多通道采集佩戴者做出手势时由压力转换的时域光信号序列;相机与微纳光纤手环式传感器连接,用于采集每个通道的时域光信号序列并转换为时域光斑图像序列;计算设备与相机连接,用于利用计算设备根据时域光斑图像序列确定光强后提取识别光强特征,并利用光强特征采用机器学习算法构建的识别模型进行手势识别。基于光学原理,利用较简单的系统实现手势的准确识别。
-
-
-
-
-
-
-
-
-