一种支持多模态交互的软件架构

    公开(公告)号:CN112749032B

    公开(公告)日:2024-05-10

    申请号:CN202110086008.4

    申请日:2021-01-22

    Applicant: 江南大学

    Abstract: 本发明公开了一种支持多模态交互的软件架构,该软件架构应用于中学虚拟实验软件,软件架构包括硬件适配层、控制层及操作层,硬件适配层包含多种终端的驱动程序及包含这些终端信息的硬件驱动库;控制层包含每个底层硬件驱动程序的按键定义,通过适配器模式将这些按键定义转化为统一的操作原语,用于屏蔽硬件操作指令的差异性;控制层将中学虚拟实验分为了拿取实验器材、组装实验器材、调整实验器材、观察实验器材四类交互原语;操作层通过观察者模式的交互信息监听,在每个实验器材的交互点上加入BaseElement基类,通过继承和扩展实现了用户硬件交互指令和虚拟实验器材的联动。

    一种面向无线胶囊内窥镜的低照度图像增强方法

    公开(公告)号:CN117635471A

    公开(公告)日:2024-03-01

    申请号:CN202311556875.5

    申请日:2023-11-21

    Applicant: 江南大学

    Abstract: 本发明公开了一种面向无线胶囊内窥镜的低照度图像增强方法,属于计算机视觉领域。所述方法包括:采用多尺度快速引导滤波函数对图像的V分量进行光照分量提取;采用OTSU法从光照分量计算亮度增强函数参数T;基于参数T和Weber‑Fechner理论拟合出亮度增强函数;使用小波函数进行饱和度调整;基于合并通道并转换到RGB色彩空间实现图像的整体增强;实验结果表明,本发明方法在图像增强的量化评价指标均值、标准差、信息熵和图像质量评价上,与现有方法相比均有提升;此外,增强后的图像在特征提取和特征匹配上,验证的效果在数量上分别平均提升了59.3%、32.9%,并提升了深度估计效果。

    一种基于可见光单图像的弱纹理表面微结构特征提取方法

    公开(公告)号:CN115170832A

    公开(公告)日:2022-10-11

    申请号:CN202210874829.9

    申请日:2022-07-25

    Applicant: 江南大学

    Inventor: 王映辉 梁炎兴

    Abstract: 本发明公开了一种基于可见光单图像的弱纹理表面微结构特征提取方法,属于图像处理技术领域。本发明在自然可见光场景下,通过拍摄弱纹理表面、灰度调整、K‑Prototypes聚类自适应网格划分、Gabor核提取高频细节特征等步骤,获得弱纹理表面微几何凹凸特征,解决了现有方法对弱纹理表面区域无法提取自身固有特征或提取精度低的问题,达到了对弱纹理表面的微观结构的特征识别和特征提取的目的,可应用于物体识别、VR、AR、表面探伤、医学诊断等重要领域。

    一种大视点变化下图像特征点提取方法

    公开(公告)号:CN117372717A

    公开(公告)日:2024-01-09

    申请号:CN202311162717.1

    申请日:2023-09-11

    Applicant: 江南大学

    Abstract: 一种大视点变化下图像特征点提取方法,涉及计算机视觉领域。解决现技术在大于40度的大视点变化下特征点提取的精度和高耗时问题。所述方法包括:根据ASIFT的仿射模拟策略对图像进行经度优化,并获取仿射模拟视点,所述图像包含基准图像和目标图像;根据仿射模拟视点以及图像灰度信息构建自适应阈值的AGAST特征检测器;根据所述AGAST特征检测器将仿射模拟视点进行自适应特征提取,获取模拟视点图像;对所述模拟视点图像进行透视变换,获取透视变换后的图像;将所述透视变换后的图像和优化后的目标图像进行SIFT特征匹配,获取匹配图像之间的特征点对与匹配关系。本发明应用于计算机视觉领域。

    一种支持实验流程的控制引擎架构及其构建方法

    公开(公告)号:CN112988118B

    公开(公告)日:2022-12-27

    申请号:CN202110169396.2

    申请日:2021-02-07

    Applicant: 江南大学

    Abstract: 本发明公开了一种支持实验流程的控制引擎架构及其构建方法,包括:实验步骤配置管理器,其根据不同的实验模式将实验资源对应的实验步骤配置文件,加载进入系统;实验模式选择器,所述实验模式选择器用于选择预定的模式,所述预定的模式包括探索模式、练习模式和考试模式;实验步骤流程拓扑图路由,其将实验步骤转化为Petri Net能够识别的建模规则,通过Petri Net完成初始工作;实验流程拓扑编辑器,所述实验流程拓扑编辑器根据建模规则,动态生成实验的流程实例。其灵活性高,能够满足虚实融合环境下的中学虚拟仿真实验的自主性探索性要求。

    一种支持多模态交互的软件架构

    公开(公告)号:CN112749032A

    公开(公告)日:2021-05-04

    申请号:CN202110086008.4

    申请日:2021-01-22

    Applicant: 江南大学

    Abstract: 本发明公开了一种支持多模态交互的软件架构,该软件架构应用于中学虚拟实验软件,软件架构包括硬件适配层、控制层及操作层,硬件适配层包含多种终端的驱动程序及包含这些终端信息的硬件驱动库;控制层包含每个底层硬件驱动程序的按键定义,通过适配器模式将这些按键定义转化为统一的操作原语,用于屏蔽硬件操作指令的差异性;控制层将中学虚拟实验分为了拿取实验器材、组装实验器材、调整实验器材、观察实验器材四类交互原语;操作层通过观察者模式的交互信息监听,在每个实验器材的交互点上加入BaseElement基类,通过继承和扩展实现了用户硬件交互指令和虚拟实验器材的联动。

    一种基于改进Harris角点的胶囊内窥镜图像特征提取方法

    公开(公告)号:CN117292151A

    公开(公告)日:2023-12-26

    申请号:CN202311186247.2

    申请日:2023-09-14

    Applicant: 江南大学

    Abstract: 本发明公开了一种基于改进Harris角点的胶囊内窥镜图像特征提取方法,包括:计算胶囊内窥镜图像每个像素点的偏导数以及梯度值,将梯度值度低于设定的梯度阈值的像素点过滤掉;对Harris相应函数进行改进,计算每个像素点改进的Harrsi响应函数值,通过响应函数值获得潜在的特征点;将改进的Harris响应函数值与滑动窗口的窗宽、滑动距离进行结合,得到自适应滑动窗口并对潜在特征点进行非极大值抑制;确定每个特征点的方向,将该方向作为改进的Harris角点的主方向,构建rBRIEF描述子,利用描述子进行特征点匹配。本发明不仅能够获得大量的特征点,还能保持高精准度;能够快速且有效地进行特征提取,能够在胶囊内窥镜图像中获得充足数量特征点的同时维持特征匹配的精度。

    基于SLAM的消化道病灶识别定位方法及系统

    公开(公告)号:CN115564944A

    公开(公告)日:2023-01-03

    申请号:CN202211155523.4

    申请日:2022-09-19

    Applicant: 江南大学

    Abstract: 本发明公开了基于SLAM的消化道病灶识别定位方法及系统,属于计算机应用技术领域。针对SLAM技术无法有效地应用于复杂的消化道地图构建的问题,本发明基于胶囊内镜采集的消化道图像序列,通过对图像进行二次线性插值来统一尺寸,通过蒙版跟踪消除水印,根据图像的清晰度和重复性进行筛选,获得精简图像集并划分,形成适用于SLAM网络的图像数据集,利用SLAM网络对得到的图像数据集进行计算处理,形成消化道地图模型。相比于现有的基于深度网络等病灶识别技术,本发明生成的HDF5数据集,可以通过SLAM网络模块构建消化道地图,从而达到定位病灶的效果。

    一种支持实验流程的控制引擎架构及其构建方法

    公开(公告)号:CN112988118A

    公开(公告)日:2021-06-18

    申请号:CN202110169396.2

    申请日:2021-02-07

    Applicant: 江南大学

    Abstract: 本发明公开了一种支持实验流程的控制引擎架构及其构建方法,包括:实验步骤配置管理器,其根据不同的实验模式将实验资源对应的实验步骤配置文件,加载进入系统;实验模式选择器,所述实验模式选择器用于选择预定的模式,所述预定的模式包括探索模式、练习模式和考试模式;实验步骤流程拓扑图路由,其将实验步骤转化为Petri Net能够识别的建模规则,通过Petri Net完成初始工作;实验流程拓扑编辑器,所述实验流程拓扑编辑器根据建模规则,动态生成实验的流程实例。其灵活性高,能够满足虚实融合环境下的中学虚拟仿真实验的自主性探索性要求。

Patent Agency Ranking