-
公开(公告)号:CN109634914A
公开(公告)日:2019-04-16
申请号:CN201811390509.6
申请日:2018-11-21
Applicant: 华侨大学
IPC: G06F16/13 , G06F16/182 , G06F16/172
Abstract: 本发明提供一种对讲语音小文件整存散分和分叉检索的优化方法,包括将对讲语音小文件进行归类;根据文件大小对每一类对讲语音小文件进行顺序排序;对于每一类对讲语音小文件,均按照排序顺序选择HDFS块空间整数倍所能容纳的最大文件个数,并对选择的对讲语音小文件进行合并存储;为选择后剩余的对讲语音小文件设置分类等级,并按设置的分类等级来对剩余的对讲语音小文件进行分类,且对分类后的对讲语音小文件进行合并存储;对存储后的合并文件建立分叉索引机制,并记录合并文件中各个对讲语音小文件的信息。本发明优点:可减少块空间数量,并达到减少NameNode维护元数据时内存占用过高的目的;可减少元数据信息的空间大小,加快读取速率。
-
公开(公告)号:CN109634914B
公开(公告)日:2021-11-30
申请号:CN201811390509.6
申请日:2018-11-21
Applicant: 华侨大学
IPC: G06F16/13 , G06F16/182 , G06F16/172
Abstract: 本发明提供一种对讲语音小文件整存散分和分叉检索的优化方法,包括将对讲语音小文件进行归类;根据文件大小对每一类对讲语音小文件进行顺序排序;对于每一类对讲语音小文件,均按照排序顺序选择HDFS块空间整数倍所能容纳的最大文件个数,并对选择的对讲语音小文件进行合并存储;为选择后剩余的对讲语音小文件设置分类等级,并按设置的分类等级来对剩余的对讲语音小文件进行分类,且对分类后的对讲语音小文件进行合并存储;对存储后的合并文件建立分叉索引机制,并记录合并文件中各个对讲语音小文件的信息。本发明优点:可减少块空间数量,并达到减少NameNode维护元数据时内存占用过高的目的;可减少元数据信息的空间大小,加快读取速率。
-