一种雨水管道溢流预测方法、电子设备及存储介质

    公开(公告)号:CN118917354B

    公开(公告)日:2025-02-25

    申请号:CN202411056665.4

    申请日:2024-08-02

    Abstract: 一种雨水管道溢流预测方法、电子设备及存储介质,属于水务监测技术领域。为了对雨水管道溢流进行精确预测,本发明包括采集雨水管道溢流数据,包括流量、液位、降雨量、管径以及坡度,然后组成雨水管道时间序列数据集;对数据进行数据预处理,包括缺失值处理、异常值处理、噪声处理及标准化处理,得到用于雨水管道溢流预测的数据集;构建雨水管道溢流预测模型;利用用于雨水管道溢流预测的数据集,结合遗传算法对构建的雨水管道溢流预测模型进行训练,得到训练好的雨水管道溢流预测模型;使用练好的雨水管道溢流预测模型进行雨水管道溢流事件预测。本发明提升了模型训练效果,进而增加了预测精度。

    便于海量多源异构数据的清洗整合存储的方法

    公开(公告)号:CN112347093A

    公开(公告)日:2021-02-09

    申请号:CN202011225571.7

    申请日:2020-11-05

    Abstract: 本发明涉及一种便于海量多源异构数据的清洗整合存储的方法,属于海量多源异构数据处理领域,海量多源异构数据处理中全局因素无法整合等问题;本发明通过构造数据源集合、遍历集合,记录类型及数据协议、数据接入环节、协议适配环节,形成1阶数据,推送缓存队列、拉取1阶数据,清洗环节,形成2阶数据,推送缓存队列、取2阶数据,主被动混合模式转换整合环节,形成3阶数据,推送缓存队列以及最终拉取3阶数据,分布存储环节,完成最终存储。本发明提供的方法,方便快捷、流程化明确,可降低海量多源异构数据的清洗整合存储各环节的耦合程度,通过逐层迁移、降阶处理,可有效降低海量数据压力、削峰填谷,能够提升整个方法过程的鲁棒性。

    便于海量多源异构数据的清洗整合存储的方法

    公开(公告)号:CN112347093B

    公开(公告)日:2021-08-03

    申请号:CN202011225571.7

    申请日:2020-11-05

    Abstract: 本发明涉及一种便于海量多源异构数据的清洗整合存储的方法,属于海量多源异构数据处理领域,海量多源异构数据处理中全局因素无法整合等问题;本发明通过构造数据源集合、遍历集合,记录类型及数据协议、数据接入环节、协议适配环节,形成1阶数据,推送缓存队列、拉取1阶数据,清洗环节,形成2阶数据,推送缓存队列、取2阶数据,主被动混合模式转换整合环节,形成3阶数据,推送缓存队列以及最终拉取3阶数据,分布存储环节,完成最终存储。本发明提供的方法,方便快捷、流程化明确,可降低海量多源异构数据的清洗整合存储各环节的耦合程度,通过逐层迁移、降阶处理,可有效降低海量数据压力、削峰填谷,能够提升整个方法过程的鲁棒性。

    一种基于Spark的分布式时空对象邻近查询方法

    公开(公告)号:CN112699173A

    公开(公告)日:2021-04-23

    申请号:CN202110024086.1

    申请日:2021-01-08

    Abstract: 本发明是一种基于Spark的分布式时空对象邻近查询方法,为了解决查询过程中,缺乏支撑海量数据频繁更新和并行查询的索引结构,导致对海量时空数据分布式存储和维护的支持性较差的问题;该方法以Spark为计算引擎,以Cassandra为存储引擎的分布式时空对象邻近查询,根据查询的空间网格集合,然后运用分布式计算模型对Cassandra的索引模型与存储模型进行查询,计算出每一个时空对象距离目标位置的最近距离;通过自定义的排序方法,计算距离目标位置最近的K个时空对象,完成K个邻近时空对象的查询。本方法实现了索引与数据分离,保证了数据的局部性,并结合时空网格索引,进行分布式时空对象邻近查询,具有快速查询、有效查询等特点。

    基于混合计算模式的云计算QoS保障调度优化方法

    公开(公告)号:CN112711473A

    公开(公告)日:2021-04-27

    申请号:CN202110027054.7

    申请日:2021-01-09

    Abstract: 本发明是一种基于混合计算模式的云计算QoS保障调度优化方法,属于云计算QoS保障调度优化领域,目的是解决云计算环境下,任务执行复杂、资源合理分配难度较高的问题,通过降维转化为单一指标,由遗传算法模式进行模糊结果的求解;然后将运算结果作为输入,由蚁群算法模式进行最终结果的求解,综合考虑云计算环境下,服务执行周期、服务能源成本、服务迁移消耗这三项指标约束,通过混合计算模式,将遗传方法与蚁群算方法进行了分阶应用;本发明避免现有算法短板的浮现、并与其互补优势,在调度优化问题求解上将更加高效,任务执行复杂以及资源合理分配难度大大降低。

    一种基于时空位置数据的存储及查询方法

    公开(公告)号:CN115827739A

    公开(公告)日:2023-03-21

    申请号:CN202211557740.6

    申请日:2022-12-06

    Abstract: 本发明涉及数据存储及查询,更具体的说是一种基于时空位置数据的存储及查询方法,该方法包括以下步骤:S1:剥离存储中的历史累积数据存储和实时动态数据的存储;S2:扩展集群提升存储性能,读写分离降低数据写入与数据剥离的压力;S3:组建存储模型;S4:数据源流驱动处理;S5:存储及查询结果展示;采用Hbase进行剥离存储中的海量复杂历史累积数据存储;对于Hbase选择可扩展集群形式进行软件组织,依靠横向扩展,持续提升存储性能;可以有效解决时空位置数据的存储复杂、查询效率过低等问题,从而综合提升时空位置数据存储和查询的效率与速度。

    一种基于城市管理网格化拆违专项系统及方法

    公开(公告)号:CN112328720A

    公开(公告)日:2021-02-05

    申请号:CN202011234223.6

    申请日:2020-11-07

    Abstract: 本发明一种基于城市管理网格化拆违专项系统,属于智慧城市技术领域包括数据库、GIS服务软件、移动端、前台网页端、分布式文件管理软件五部分,目的是高效完成拆违工作,解决拆违工作流程繁琐,拆违类型冗杂,审批核查时间长,成本高的问题。数据库中存储拆违专项业务流程审批数据,GIS服务软件提供基础地形及网格化服务,移动端进行拆违专项业务数据的上报及处理,前台网页端完成对业务数据审批核查及统计分析,分布式文件管理软件对拆违专项中图片及视频的存储及下载。本发明有效的解决了在拆违工作中各部门职责分配不明确、工作流程复杂、财力及时间的成本,实现了市城管局科学统筹、落实责任、强化督导,充分发挥各区政府拆违主体作用。

Patent Agency Ranking