一种内窥图像的三维重建方法及装置

    公开(公告)号:CN119273855A

    公开(公告)日:2025-01-07

    申请号:CN202411806938.2

    申请日:2024-12-10

    Abstract: 本发明公开了一种内窥图像的三维重建方法及装置,包括:搭建偏振计量双目内窥镜系统;接收不同场景下的原始内窥图像,解耦得到相应的RGB图像和不同偏振角度的偏振图像,计算对应的偏振信息编码;构建一个端到端的RGB+偏振的融合网络,利用偏振模态携带的稠密的表面法线信息来增强双目立体视觉的深度信息,并将计算得到的偏振信息编码与RGB图像组作为输入,实时获取相应的深度图;利用图像当前的位姿参数以及深度图进行图像重建,得到三维可视化点云。本发明能够高效地融合内窥镜成像系统中的RGB模态信息与偏振模态信息,对复杂的内窥场景执行高精度的三维模型重建任务,从而显著提升医生在进行医疗诊断时的操作速度与判断准确率。

    一种基于SLAM的手术导航方法

    公开(公告)号:CN115919461B

    公开(公告)日:2023-08-08

    申请号:CN202211588343.5

    申请日:2022-12-12

    Abstract: 本发明公开了一种基于SLAM的手术导航方法,系统包括医学图像扫描装置、双目内窥镜、计算机处理软件和显示装置。术前扫描手术部位获取扫描图像,并通过计算机软件进行三维重建;手术中通过双目内窥镜获取图像,使用双目SLAM进行实时建图;对于初始关键帧帧图像,先进行双目匹配,后通过标志点法与术前三维模型进行配准,建立世界坐标系;在内窥镜移动过程中,关键帧经过双目匹配后,根据SLAM提供的位姿信息,自动与三维模型配准,实时显示相机运动轨迹及当前镜头场景在手术部位的位置,并提供大视野拼接图像作为导航的有益信息,本发明设备简单,操作方便,为当前精准化与微创化的外科手术提供了新的技术方法。

    一种结合SfM和双目匹配的内窥图像三维重建方法

    公开(公告)号:CN112967330A

    公开(公告)日:2021-06-15

    申请号:CN202110305793.8

    申请日:2021-03-23

    Abstract: 本发明公开了一种结合SfM(Structure from Motion)和双目匹配的内窥图像三维拼接方法,包括内窥镜左右视图序列获取,左视图或右视图序列SfM重建,双目匹配位点判断,双目匹配重建,点云预处理和SfM点云与双目匹配点云配准等步骤,本方法针对胃肠道场景的特点,在SfM三维重建点云框架的基础上,通过双目匹配点云的三维拼接,实现整个场景的快速稠密重建,重建结果保留了原有的特征和尺度信息,方便医生进行重点区域的观察和三维测量。

    一种多人在线的图像半自动标注方法及系统

    公开(公告)号:CN112966772A

    公开(公告)日:2021-06-15

    申请号:CN202110305229.6

    申请日:2021-03-23

    Abstract: 本申请公开了一种多人在线的图像半自动标注方法及系统,涉及的领域包括工业产品缺陷标准的制定,缺陷样品数据的收集,样品数据集的划分,人工标注;预检测模型训练,服务器端深度学习模型部署,客户端和服务器端数据通信,半自动标注文件的产生和显示;人工交互式修改,模型精度指标计算,模型微调迭代。该发明的主要特点是,只使用少量缺陷样本就可以训练一个预检测模型。然后通过人工修改预检测模型的输出结果,不断生成新的标注数据。最后,当新的标注数据达到一定比例时,将新的标注数据加入到原来的训练数据,重新微调模型参数。同时,该发明同时支持多个客户端同步工作,只需要每个标注客户端能连接到互联网即可完成标注工作。

    一种内窥图像的景深扩展方法及装置

    公开(公告)号:CN117710233B

    公开(公告)日:2024-05-24

    申请号:CN202410162617.7

    申请日:2024-02-05

    Abstract: 本发明公开了一种内窥图像的景深扩展方法及装置,该方法包括接收不同聚焦平面对应的原始图像;设计编码‑解码网络模型用于获取内窥图像的底层特征;利用高维空间频率对底层特征进行焦点度量分析得到初始决策图以及初始融合图像;同时确定边界区域范围并据此设计边界度量指标修复焦面边界过渡,得到最终的融合图像。该装置主要包括图像采集模块,图像融合模块,图像修复模块,图像显示模块。本发明降低了图像融合方法在实际内窥镜系统应用中对不同相机采集的图像之间的高配准要求,并且可有效地实现内窥镜系统的景深扩展,为医生临床诊断提供技术支持;本发明在景深扩展性能、处理速度和性价比等方面均优于现有景深扩展系统。

    一种分辨率可重构视觉传感器

    公开(公告)号:CN115460362A

    公开(公告)日:2022-12-09

    申请号:CN202211390953.4

    申请日:2022-11-08

    Abstract: 本发明公开了一种分辨率可重构视觉传感器,包括:多个像素,每个像素包含一个传感器传感模块,传感器传感模块用于将光信号转换为电信号,模拟信号转换为数字信号输出。传感器像素控制模块,用于控制传感模块中像素的输出,传感器信号传输模块和传感器信号处理模块,用于将信号传输模块传输的数据进行处理。本发明中的视觉传感器基于人视网膜中细胞的分布及视觉注意机制,在图像采集的基础上,可通过像素控制模块对像素的输出模式进行控制,实现低分辨实时监测模式和仿生局部高分辨实时分析模式。可在不降低目标物详细信息的情况下实现多个目标物的仿生局部高分辨成像,从而减少信息冗余,加快成像速度。

    一种内窥图像的三维重建方法及装置

    公开(公告)号:CN119273855B

    公开(公告)日:2025-04-08

    申请号:CN202411806938.2

    申请日:2024-12-10

    Abstract: 本发明公开了一种内窥图像的三维重建方法及装置,包括:搭建偏振计量双目内窥镜系统;接收不同场景下的原始内窥图像,解耦得到相应的RGB图像和不同偏振角度的偏振图像,计算对应的偏振信息编码;构建一个端到端的RGB+偏振的融合网络,利用偏振模态携带的稠密的表面法线信息来增强双目立体视觉的深度信息,并将计算得到的偏振信息编码与RGB图像组作为输入,实时获取相应的深度图;利用图像当前的位姿参数以及深度图进行图像重建,得到三维可视化点云。本发明能够高效地融合内窥镜成像系统中的RGB模态信息与偏振模态信息,对复杂的内窥场景执行高精度的三维模型重建任务,从而显著提升医生在进行医疗诊断时的操作速度与判断准确率。

    一种基于SLAM的手术导航方法

    公开(公告)号:CN115919461A

    公开(公告)日:2023-04-07

    申请号:CN202211588343.5

    申请日:2022-12-12

    Abstract: 本发明公开了一种基于SLAM的手术导航方法,系统包括医学图像扫描装置、双目内窥镜、计算机处理软件和显示装置。术前扫描手术部位获取扫描图像,并通过计算机软件进行三维重建;手术中通过双目内窥镜获取图像,使用双目SLAM进行实时建图;对于初始关键帧帧图像,先进行双目匹配,后通过标志点法与术前三维模型进行配准,建立世界坐标系;在内窥镜移动过程中,关键帧经过双目匹配后,根据SLAM提供的位姿信息,自动与三维模型配准,实时显示相机运动轨迹及当前镜头场景在手术部位的位置,并提供大视野拼接图像作为导航的有益信息,本发明设备简单,操作方便,为当前精准化与微创化的外科手术提供了新的技术方法。

Patent Agency Ranking