基于视觉和文本特征的教材内容及结构的提取方法和装置

    公开(公告)号:CN117058704B

    公开(公告)日:2024-01-05

    申请号:CN202311190777.4

    申请日:2023-09-15

    Abstract: 本发明公开了一种基于视觉和文本特征的教材内容及结构的提取方法和装置,包括:读取PDF教材并将每个页面转成图片;对图片进行灰度转换、膨胀、腐蚀操作得到预处理后图片;基于空白区域对预处理后图片进行区域分割以得到多个区域块;采用OCR识别区域块中文本字符,并建立文本字符与区域块的对应关系;对区域块进行页眉页脚识别,并去除页眉页脚对应的区域块;对剩余区域块基于视觉规则和文本规则共同进行区域类型判断,其中,区域类型包括标题、正文以及自定义类型;根据区域类型和文本字符与区域块的对应关系建立取PDF教材的结构关系。该方法和装置能够实现结构化信息提取,适用于包含图片格式等各种类型的PDF文件。

    一种自适应的主动式信息交互教育方法

    公开(公告)号:CN116012202A

    公开(公告)日:2023-04-25

    申请号:CN202211489023.4

    申请日:2022-11-25

    Abstract: 本发明涉及一种自适应的主动式信息交互教育方法,根据学习者的环境和注意力的情况,自适应地转变播放方式,如将视频通过内容识别和自动语音生成转变成音频,或者对音频自动生成字幕和配图生成视频。具体的,该装置可以根据声音信号、振动信号、加速度传感器、感光传感器,进行环境干扰特征的识别,判别环境嘈杂程度、声音场景、环境光线条件、设备晃动状态;同时,该装置可以辨识学习者的注意力状态,自动推送合适的内容形式,以最大化注意力集中程度。并且,该装置可以通过对视频和图像内容识别,自动生成描述视频和图像内容的文字,进一步合成音频播放;该装置也可以对音频内容识别,自动生成文字、配图,进行视觉呈现。

    结合自动标注和召回补全的教材结构提取方法和装置

    公开(公告)号:CN116912867B

    公开(公告)日:2023-12-29

    申请号:CN202311175495.7

    申请日:2023-09-13

    Abstract: 本发明公开了一种结合自动标注和召回补全的教材结构提取方法和装置,将教材PDF转换为图片,并通过高精度OCR识别出图片中的每个区域的文本信息和位置信息,再结合规则模型和聚类来构建样本,并利用样本训练与区域类型对应的多种分类模型来预测区域类型未知的区域类型,最后自动召回补全缺失的部分并建立整本教材的内容及结构关系,这样能够顾实现快速准确地从教材中快速准备地提取出标题和正文,并建立相应的结构关系。

    基于视觉和文本特征的教材内容及结构的提取方法和装置

    公开(公告)号:CN117058704A

    公开(公告)日:2023-11-14

    申请号:CN202311190777.4

    申请日:2023-09-15

    Abstract: 本发明公开了一种基于视觉和文本特征的教材内容及结构的提取方法和装置,包括:读取PDF教材并将每个页面转成图片;对图片进行灰度转换、膨胀、腐蚀操作得到预处理后图片;基于空白区域对预处理后图片进行区域分割以得到多个区域块;采用OCR识别区域块中文本字符,并建立文本字符与区域块的对应关系;对区域块进行页眉页脚识别,并去除页眉页脚对应的区域块;对剩余区域块基于视觉规则和文本规则共同进行区域类型判断,其中,区域类型包括标题、正文以及自定义类型;根据区域类型和文本字符与区域块的对应关系建立取PDF教材的结构关系。该方法和装置能够实现结构化信息提取,适用于包含图片格式等各种类型的PDF文件。

    结合自动标注和召回补全的教材结构提取方法和装置

    公开(公告)号:CN116912867A

    公开(公告)日:2023-10-20

    申请号:CN202311175495.7

    申请日:2023-09-13

    Abstract: 本发明公开了一种结合自动标注和召回补全的教材结构提取方法和装置,将教材PDF转换为图片,并通过高精度OCR识别出图片中的每个区域的文本信息和位置信息,再结合规则模型和聚类来构建样本,并利用样本训练与区域类型对应的多种分类模型来预测区域类型未知的区域类型,最后自动召回补全缺失的部分并建立整本教材的内容及结构关系,这样能够顾实现快速准确地从教材中快速准备地提取出标题和正文,并建立相应的结构关系。

Patent Agency Ranking