-
公开(公告)号:CN108460121A
公开(公告)日:2018-08-28
申请号:CN201810154658.6
申请日:2018-02-23
Applicant: 重庆邮电大学
Abstract: 本发明公开了一种智慧城市中时空数据小文件合并方法,小文件合并作为一种微观的数据布局机制,可以有效提升系统I/O性能,减小用户访问延时。本文通过分析时空数据特点,将历史的用户访问信息进行参数化表示和时空属性提取,在时空属性域里,对访问信息利用AGNES算法进行层次聚类,并对聚类结果进行基于访问密度的加权计算,找到访问相关时空范围。最后,利用该时空范围指导小文件的合并。实验结果表明,本发明算法简单高效,极大的提高了系统内时空数据小文件的访问效率。
-
公开(公告)号:CN108460121B
公开(公告)日:2022-02-08
申请号:CN201810154658.6
申请日:2018-02-23
Applicant: 重庆邮电大学
IPC: G06F16/16 , G06F16/13 , G06F16/17 , G06F16/182 , G06K9/62
Abstract: 本发明公开了一种智慧城市中时空数据小文件合并方法,小文件合并作为一种微观的数据布局机制,可以有效提升系统I/O性能,减小用户访问延时。本文通过分析时空数据特点,将历史的用户访问信息进行参数化表示和时空属性提取,在时空属性域里,对访问信息利用AGNES算法进行层次聚类,并对聚类结果进行基于访问密度的加权计算,找到访问相关时空范围。最后,利用该时空范围指导小文件的合并。实验结果表明,本发明算法简单高效,极大的提高了系统内时空数据小文件的访问效率。
-