-
公开(公告)号:CN115730067A
公开(公告)日:2023-03-03
申请号:CN202211430454.3
申请日:2022-11-15
Applicant: 东北林业大学
IPC: G06F16/35 , G06F40/12 , G06F18/25 , G06F18/241 , G06F40/242 , G06F16/36 , G06N3/0442 , G06N3/04 , G06N3/08
Abstract: 基于短文本与复杂语义符号的多通道情感分类方法及设备,涉及一种情感分类方法及设备。为了解决目前的情感分类模型会忽略颜文字对文本的影响,容易导致分类结果与作者的情感产生偏差的问题。本发明提取短文本中的颜文字,根据人体运动学模型将颜文字划分并进行颜文字的匹配提取,使用全连接特征提取网络训练,获取颜文字词典映射向量,并与位置数量信息特征向量进行拼接得到颜文字特征向量;获得短文本中文本信息对应的文字文本向量,与颜文字特征向量进行融合得到融合特征,利用自注意力机制对融合特征向量进行优化,然后送入情感分类模型进行情感分离,情感分类模型为由简单神经单元SRU构成的双向的简单循环神经网络BiSRU。
-
公开(公告)号:CN117576783A
公开(公告)日:2024-02-20
申请号:CN202311747891.2
申请日:2023-12-18
Applicant: 东北林业大学
IPC: G06V40/20 , G06V20/40 , G06V10/44 , G06V10/764 , G06V10/774 , G06V10/82 , G06N3/0442 , G06N3/045 , G06N3/048 , G06N3/084
Abstract: 本发明涉及基于手部关键点与双层双向LSTM网络的动态手势识别方法,包括以下步骤:S1、获取手部关键点数据集,得到输入序列;S2、将上一步获取的输入序列进行时间翻转数据增强处理生成翻转序列,将输入序列和翻转序列作为网络模型输入层;S3、构建双层双向LSTM网络模型进行手语动态识别;S4、使用注意力层对翻转反向输出序列进行处理,分别计算正向和反向的注意力加权输出,拼接正向和反向的注意力输出;S5、使用全连接层将注意力加权的输出映射到输出维度。本申请对手语视频数据集进行处理采集得到手部关键点,构建双层双向LSTM网络模型对关键点信息进行手语识别,充分挖掘和利用关键点信息,提高手语识别的速度和准确率。
-
公开(公告)号:CN118211175A
公开(公告)日:2024-06-18
申请号:CN202410272238.3
申请日:2024-03-11
Applicant: 哈尔滨兴业宝科技有限公司 , 东北林业大学
IPC: G06F18/25 , G06F18/2431 , G06F18/27 , G06N3/0455 , G06N3/084 , G06F40/30 , G06V40/16 , G06V10/82 , G10L25/30 , G10L25/63 , G06N3/048
Abstract: 本发明涉及一种基于Transformer的多模态情感分析方法。包括:S1、获取一组多模态,包括文本模态Ti、视觉模态Vi和音频模态Ai,将多模态进行联合嵌入处理;S2、单流Transformer模型的输出是H令牌,在H令牌中,H[CLS]利用at Pooler使用下游任务,Pooler使用全连接层和tanh激活功能,将Ti,V′i和A′i三对数据通过Pooler处理后,得到#imgabs0#S3、通过多模态掩码图像‑语言建模和图像文本对齐进行预训练任务;S4、对每组模态对的H[CLS]推导出的#imgabs1#和#imgabs2#施加自关注层和共同关注层,并送到全连接层进行结果预测;S5、用#imgabs3#代表联合损失函数,由S3中的两种预训练任务组成,#imgabs4#表示任务损失函数,目标函数由三个联合损失的平均值与#imgabs5#求和获得。本方法具有显著的优越性和有效性,将多模态预训练应用于情感分析具有发展潜力及应用价值。
-
公开(公告)号:CN116010595A
公开(公告)日:2023-04-25
申请号:CN202211430451.X
申请日:2022-11-15
Applicant: 东北林业大学
IPC: G06F16/35 , G06F17/16 , G06F18/25 , G06F18/2415 , G06F18/214 , G06N3/0464 , G10L25/63
Abstract: 基于同构性和异质性动态信息交互的多模态情感分类方法,涉及多模态情感分析技术领域,本申请提出基于同构性和异质性动态信息交互的多模态情感分类方法,特别是针对目前多模态表达空间内的同构性和异质性特征,本申请采用了一个具有分布排列的共享子空间捕捉模态间潜在的共性和特征,并且设计了一个多模态动态信息交互方法动态融合文本和音频模态内同构性和异质性信息,从而保留各模态的特性,并消除各模态间所存在的歧义和噪声,进而提升了情感分类的准确性。
-
公开(公告)号:CN116010595B
公开(公告)日:2024-08-09
申请号:CN202211430451.X
申请日:2022-11-15
Applicant: 东北林业大学
IPC: G06F16/35 , G06F17/16 , G06F18/25 , G06F18/2415 , G06F18/214 , G06N3/0464 , G10L25/63
Abstract: 基于同构性和异质性动态信息交互的多模态情感分类方法,涉及多模态情感分析技术领域,本申请提出基于同构性和异质性动态信息交互的多模态情感分类方法,特别是针对目前多模态表达空间内的同构性和异质性特征,本申请采用了一个具有分布排列的共享子空间捕捉模态间潜在的共性和特征,并且设计了一个多模态动态信息交互方法动态融合文本和音频模态内同构性和异质性信息,从而保留各模态的特性,并消除各模态间所存在的歧义和噪声,进而提升了情感分类的准确性。
-
公开(公告)号:CN202847634U
公开(公告)日:2013-04-03
申请号:CN201220641733.X
申请日:2012-11-16
Applicant: 东北林业大学
IPC: B60R21/02 , B60R21/013
Abstract: 本实用新型涉及一种基于ARM的公交车自动翻转逃生窗,包括信号采集单元、ARM控制单元、报警器、逃生窗、外窗支架、电动机和翻转机构,外窗支架安装在车体的窗框上端,翻转机构安装在车体的窗框下端,逃生窗安装在翻转机构上,电动机与翻转机构连接,信号采集单元包括烟雾传感器、水平仪、碰撞传感器和温度探测器,电动机、报警器、烟雾传感器、水平仪、碰撞传感器、温度探测器分别与ARM控制单元电信号连接。本实用新型具有结构简单、执行速度快、功耗低、安全可靠,稳定性强的优点,降低了人身伤害的事故发生概率。
-
公开(公告)号:CN219625924U
公开(公告)日:2023-09-01
申请号:CN202321337374.3
申请日:2023-05-30
Applicant: 东北林业大学
Inventor: 纪明宇
Abstract: 本实用新型属于计算机技术领域,尤其为一种计算机视觉遮挡装置,包括计算机本体,所述计算机本体上安装有遮挡组件,所述遮挡组件包括固定在所述计算机本体下表面的底座以及开设在所述底座两侧呈对称排列的条形槽和设置在所述条形槽内部的连接架,所述计算机本体的外部设置有呈U型结构的遮阳板本体,两组所述连接架表面和所述遮阳板本体的表面固定连接,所述条形槽内部设置有定位杆,所述定位杆的两端与所述底座固定连接,通过设置了遮挡组件,在使用遮阳板本体过程中,可以对光线进行遮挡,无需将遮阳板本体安装在计算机本体上,不会对计算机本体的显示产生影响,提高对遮阳板本体的使用效果。
-
公开(公告)号:CN202874653U
公开(公告)日:2013-04-17
申请号:CN201220631975.0
申请日:2012-11-13
Applicant: 东北林业大学
IPC: A47D9/02 , G05B19/042
Abstract: 本实用新型提供一种基于单片机微控制器的婴儿床,包括摇篮、驱动电机、底座和智能控制单元,摇篮铰接在底座上,由驱动电机驱动摇篮摇动,智能控制单元包括四个振动传感器、温度传感器、语音识别单元等。四个振动传感器分别位于摇篮的四个角上,温度传感器和湿度传感器分别位于摇篮的中央位置,单片机微控制器分别电信号连接四个振动传感器、温度传感器、语音识别单元、湿度传感器、无线通信单元、视频采集单元、灯控单元、音频播放单元、驱动电机、输入键盘、数据存储器。本实用新型设计合理、使用方便,通过在婴儿床上加装视频监控装置,可以在婴儿入睡时做自己的事,同时又能及时得知婴儿的状态,适合广泛使用。
-
-
-
-
-
-
-