便于海量多源异构数据的清洗整合存储的方法

    公开(公告)号:CN112347093A

    公开(公告)日:2021-02-09

    申请号:CN202011225571.7

    申请日:2020-11-05

    Abstract: 本发明涉及一种便于海量多源异构数据的清洗整合存储的方法,属于海量多源异构数据处理领域,海量多源异构数据处理中全局因素无法整合等问题;本发明通过构造数据源集合、遍历集合,记录类型及数据协议、数据接入环节、协议适配环节,形成1阶数据,推送缓存队列、拉取1阶数据,清洗环节,形成2阶数据,推送缓存队列、取2阶数据,主被动混合模式转换整合环节,形成3阶数据,推送缓存队列以及最终拉取3阶数据,分布存储环节,完成最终存储。本发明提供的方法,方便快捷、流程化明确,可降低海量多源异构数据的清洗整合存储各环节的耦合程度,通过逐层迁移、降阶处理,可有效降低海量数据压力、削峰填谷,能够提升整个方法过程的鲁棒性。

    一种自动化三维白膜数据发布方法

    公开(公告)号:CN117496082A

    公开(公告)日:2024-02-02

    申请号:CN202311526808.9

    申请日:2023-11-15

    Abstract: 本发明提出一种自动化三维白膜数据发布方法,属于建筑建模技术领域。包括以下步骤:S1.获取原始城市建筑的SHP矢量数据;S2.获取三维白膜颜色配置条带、贴图文件;S3.设定三维白膜尺寸、白膜层级、纹理和中央轴线生成三维化白膜场景数据;S4.将三维白膜场景数据进行纹理压缩、白膜颜色转化并阶段缓存临时数据;S5.读取属性字段和过滤待展示属性字段;S6.设定数据存储目录及结构、记录可视化初始坐标、定义输出数据的文件格式和输出结果数据;S7.设定服务配置JSON参数,将结果数据传输至WEB中间件,发布数据形成可调用的URL。解决现有技术中存在的城市建筑白膜数据生产与服务发布的效率低与准确率差的技术问题。

    一种水务物联网数据传输加密系统及工作方法

    公开(公告)号:CN117411697A

    公开(公告)日:2024-01-16

    申请号:CN202311408977.2

    申请日:2023-10-27

    Abstract: 一种水务物联网数据传输加密系统及工作方法,属于物联网数据通信加密安全技术领域。为提高水务数据传输加密传输安全性,本发明数据服务器分别连接密匙生成验证器、数据服务器加密单元、密匙生成器单元,密匙生成验证器分别连接密匙生成器单元、认证单元,应用服务器分别连接数据服务器加密单元和认证单元;密匙生成验证器用于验证密匙生成器单元生成的密匙的有效性,同时生成公匙和私匙;数据服务器用于验证密匙的有效性;数据服务器加密单元用于将得到的公匙进行加密;密匙生成器单元用于生成密匙;认证单元用于接收应用服务器的注册认证,接收密匙生成验证器发送的公匙和私匙,校验后发送给应用服务器;应用服务器用于解密获取数据信息。

    一种基于消息池流转模式的时空数据自动化服务发布方法

    公开(公告)号:CN114090290A

    公开(公告)日:2022-02-25

    申请号:CN202111367999.X

    申请日:2021-11-18

    Abstract: 本发明涉及时空数据的服务处理领域,更具体的说是一种基于消息池流转模式的时空数据自动化服务发布方法,步骤一:运行消息缓冲池;步骤二:创建数据源;步骤三:上传数据源;步骤四:共享数据源;步骤五:解压数据源;所述解压数据源为通过数据解压模块监听消息缓冲池,当数据解压模块收到通知后,将数据源进行解压,解压完成后推送通知到消息缓冲池步骤六:数据缓存切片;所述数据缓存切片为通过缓存切片模块持续监听消息缓冲池,当缓存切片模块收到通知后,缓存切片模块将数据进行分层切片,切片完成后推送通知到消息缓冲池;步骤七:服务发布;可以减少时空数据在服务发布过程中过多的人工操作,提升时空数据服务发布的便捷性。

    基于混合计算模式的云计算QoS保障调度优化方法

    公开(公告)号:CN112711473A

    公开(公告)日:2021-04-27

    申请号:CN202110027054.7

    申请日:2021-01-09

    Abstract: 本发明是一种基于混合计算模式的云计算QoS保障调度优化方法,属于云计算QoS保障调度优化领域,目的是解决云计算环境下,任务执行复杂、资源合理分配难度较高的问题,通过降维转化为单一指标,由遗传算法模式进行模糊结果的求解;然后将运算结果作为输入,由蚁群算法模式进行最终结果的求解,综合考虑云计算环境下,服务执行周期、服务能源成本、服务迁移消耗这三项指标约束,通过混合计算模式,将遗传方法与蚁群算方法进行了分阶应用;本发明避免现有算法短板的浮现、并与其互补优势,在调度优化问题求解上将更加高效,任务执行复杂以及资源合理分配难度大大降低。

    一种基于城市老旧小区改造的违建采集分类方法

    公开(公告)号:CN112348708A

    公开(公告)日:2021-02-09

    申请号:CN202011223803.5

    申请日:2020-11-05

    Abstract: 本发明涉及一种基于城市老旧小区改造的违建采集分类方法,属于智慧城市技术领域,目的是解决采集标准不明确,没有明确指导过程以及违建案件处理难度大的问题,本发明包括将城市老旧小区违建进行分类,定义违建属性信息,并对违建属性进行填报,根据城市老旧小区改造规范定义违建指标,设置逾期未完成数,为截止规定拆除时间内仍未按照要求拆除的违建案件数量,进行数据采集,包括定义待确认数和其他录入信息项,最终完成违建采集分类过程。本发明实现了城市违建信息精细化采集分类,指导一线人员规范化采集,统一标准统一录入,为城市数据治理打下基础,为相关人员提供数据支撑,指导城市拆违工作、老旧小区改造工作的进行与发展。

Patent Agency Ranking