-
公开(公告)号:CN116597517A
公开(公告)日:2023-08-15
申请号:CN202310579119.8
申请日:2023-05-22
Applicant: 北京化工大学
IPC: G06V40/20 , G06V40/70 , G06V10/764 , G06V10/77 , G06V10/80 , G06V10/82 , G06F18/213 , G06F18/24 , G06F18/25 , G06N3/0464 , G06N3/048
Abstract: 本发明涉及一种融合视觉与触觉的多模态针刺手法识别方法以及系统,其识别方法包括:对触觉压电信号和手部空间信号进行特征提取,再依据得到的压电信号特征和手部空间信号特征进行单信号特征或多信号特征融合的随机输出;将针刺图像数据交由相互独立的多个卷积通道处理,同时通过挤压和非线性激活操作施加注意力机制来自适应校准每个卷积通道的权重以得到图像特征;对随机输出结果和图像特征进行张量积运算得到张量外积,并依据张量外积以及分别为图像特征和随机输出结果构建的权重矩阵进行张量融合得到融合张量,即融合识别结果。本发明提供的多模态融合方案可以将这多种模态信息融合在一起,实现更全面、准确的针刺手法监测和识别。
-
公开(公告)号:CN222653376U
公开(公告)日:2025-03-21
申请号:CN202421462088.4
申请日:2024-06-25
Applicant: 北京化工大学 , 天津中医药大学第一附属医院
Abstract: 本实用新型公开了一种针刺手法触觉数据采集装置及系统,其涉及针灸学习器械的技术领域,针刺手法触觉数据采集装置包括:指套传感器,指套传感器包括指套安装带和传感器组件,指套安装带用于套设在施针者的手指上,传感器组件设置在指套安装带上,用于采集施针者施展针刺手法时手指上的触觉数据;可携带主机,可携带主机包括主机和手腕安装带,手腕安装带用于套设在施针者的手腕上,主机设置在手腕安装带上与传感器组件连接,用于接收触觉数据。其有益效果是,本实用新型提高了针灸学习器械的整体便携度,同时本实用新型能够在针灸初学者或低资历针灸师在进行针刺手法练习的过程中,实现针刺手法的标准化和量化的针灸练习。
-
-