一种海量异构数据存储方法及系统

    公开(公告)号:CN110941618A

    公开(公告)日:2020-03-31

    申请号:CN201911178004.8

    申请日:2019-11-27

    Abstract: 本发明公开了一种海量异构数据存储方法及系统,所述方法包括:从数据源获取海量异构数据;根据设定的规则对海量异构数据进行分类,分为:结构化数据、半结构化数据和非结构化数据以及系统运行过程中产生的热点数据;根据数据的元数据,将不同类型的数据存储至不同的数据存储分区,不同的数据存储分区包括:关系型数据库Oracle、MySQL和非关系型数据库HBase、内存型数据库Redis。本发明提供的海量异构数据存储方法及系统,通过整合多种数据库,实现了海量结构化数据、半结构化数据和非结构化数据的有效结合和统一存储管理,解决了数据的异构性、海量性和不确定性的问题。

    一种基于区域分割联合Yolov5的废钢判级方法

    公开(公告)号:CN114926483B

    公开(公告)日:2025-05-23

    申请号:CN202210628082.9

    申请日:2022-06-06

    Abstract: 本发明公开了一种基于区域分割联合Yolov5的废钢判级方法,采用Mask R‑CNN分割模型,将车厢与背景进行分割,通过改进Yolov5的检测头,提取出每个分割区域特征即该区域料型类别和所属料型置信度,在训练时候,通过反传分割区域的分类loss和sigmoid置信度乘积,来训练网络,在推理时候,输入原图后,直接输出每个区域的类别和置信度,通过预设阈值,过滤掉无效区域即填充灰度区域,最后计算出整车车厢废钢类型以及其占比;吸取了分类网络和检测网络各自优点,在速度上和精度上都有良好的效果,本发明不仅不会漏区域,还会将模型训练侧重点加持到分类模型,网络模型更易收敛。

    一种基于计算机视觉的智能化电石发气量计算方法

    公开(公告)号:CN115546128A

    公开(公告)日:2022-12-30

    申请号:CN202211158295.6

    申请日:2022-09-22

    Abstract: 本发明提出了一种基于计算机视觉的智能化电石发气量计算方法,包括步骤:采用电石出炉识别模型对摄像头视频流进行打样棒自动识别,抓取含有电石的图片;采用图片质量判定模型对含有电石的图片进行质量判定并进行筛选;将筛选后的图片通过分割模型进行分割,去除电石周边干扰像素;采用发气量计算模型对分割后的电石图片进行发气量值计算;采用发气量纠正模型对分割后的电石图片进行电石等级检测,对电石不同区域对应等级给出对发气量值进行矫正的发气量修正值;采用发气量加权计算模型,通过结合当前电石炉配料比以及计算出的发气量值和发气量修正值,计算出最终的发气量值。本发明能够对出炉打样棒电石进行实时发气量计算。

    大数据背景下数据分析处理服务平台

    公开(公告)号:CN114780093A

    公开(公告)日:2022-07-22

    申请号:CN202210515711.7

    申请日:2022-05-11

    Abstract: 本发明公开了一种大数据背景下数据分析处理服务平台,涉及数据处理分析技术领域。大数据背景下数据分析处理服务平台,支持多种数据处理框架和编程语言的综合数据分析服务平台,包括外围模块、zeppelin‑server模块、zeppelin‑interpreter模块、zeppelin‑zengine模块、zeppelin‑web模块和数据库模块。所述zeppelin‑server模块为整体系统入口,提供服务器功能、权限认证以及用户校验功能,zeppelin‑interpreter模块用于执行解释器,所述zeppelin‑zengine模块用于zeppelin中notebook的持久化和检索服务。该大数据背景下数据分析处理服务平台,本服务平台采用基于Zepeelin框架进行开发,支持多种主流的数据处理框架,包括Hadoop、Spark、Flink和R等框架,提供了主流的数据库操纵能力,包括PostgreSQL、HBase和MySQL。

Patent Agency Ranking