一种面向数据处理的能耗优化数据集分配方法

    公开(公告)号:CN103927231B

    公开(公告)日:2016-10-05

    申请号:CN201410124657.9

    申请日:2014-03-31

    CPC classification number: Y02D10/22 Y02D10/36

    Abstract: 本发明公开了一种面向数据处理的能耗优化数据集分配方法,包括:把待分配数据集按照IOPS属性值从大到小依次排序形成待分配数据集队列,数据中心服务器也按照IOPS能力从大到小依次排序构成待分配服务器队列;同时创建已分配服务器队列和各个数据中心服务器的已分配数据集队列,从上述待分配数据集队列头部取出第一个待分配数据集,同时判断已分配服务器队列是否为空,若已分配服务器队列为空,则从待分配服务器队列头部选取第一台服务器作为当前数据中心服务器。本方法使得IOPS需求大的热点数据集得以集中分配在数据中心服务器上,避免了处理大规模数据过程中虚拟机的放置和迁移问题,达到了全面优化数据中心能耗值、平衡服务器负载的目的。

    一种基于混合存储设备的数据读写方法与装置

    公开(公告)号:CN103942159A

    公开(公告)日:2014-07-23

    申请号:CN201410101680.6

    申请日:2014-03-19

    Abstract: 本发明公开了一种基于混合存储设备的数据读写方法,所述混合存储设备包括非易失的小粒度寻址介质与非易失的大粒度寻址介质;所述非易失的小粒度寻址介质中存储有地址映射表,所述地址映射表中包含至少一条地址映射记录,每条地址映射记录包括逻辑地址、与所述逻辑地址对应的物理地址以及对应所述逻辑地址的写操作次数;所述方法包括:接收操作请求;解析所述操作请求的逻辑地址,通过所述地址映射表确定所述操作请求对应的数据在所述混合存储设备中的物理地址;根据所述物理地址,在相应存储介质中的相应位置读写数据。本发明还提供了相应的数据读写装置。本发明可以减小额外写开销、提高读写效率,延长存储设备的使用寿命。

    一种批量快速创建文件系统元数据和数据的方法

    公开(公告)号:CN104537050A

    公开(公告)日:2015-04-22

    申请号:CN201410826066.6

    申请日:2014-12-25

    CPC classification number: G06F17/3012 G06F17/30132

    Abstract: 本发明公开了一种批量快速创建文件系统元数据和数据的方法,具体针对预知的工作集,例如目录拷贝,压缩文件解压操作等,在保证文件系统可靠性的前提下,首先对元数据区域的超级块、块组描述符、数据位图、Inode节点位图三种元数据进行修改。然后依次按照操作的顺序将Inode节点信息和数据分别写入元数据区域和数据区域。根据本发明的方法,首先,使得系统避免了元数据页面写回引入的频繁随机的小写问题;其次,增加了写延迟的时间,让元数据和数据区域更大程度地吸收合并了部分IO请求,导致同一元数据对象下发到磁盘的多次更新操作合并成一次磁盘更新;再次,在元数据和数据区域中,实现Inode节点和数据块地顺序创建,减少了磁头寻道和定位的次数。

    一种批量快速创建文件系统元数据和数据的方法

    公开(公告)号:CN104537050B

    公开(公告)日:2017-12-15

    申请号:CN201410826066.6

    申请日:2014-12-25

    Abstract: 本发明公开了一种批量快速创建文件系统元数据和数据的方法,具体针对预知的工作集,例如目录拷贝,压缩文件解压操作等,在保证文件系统可靠性的前提下,首先对元数据区域的超级块、块组描述符、数据位图、Inode节点位图三种元数据进行修改。然后依次按照操作的顺序将Inode节点信息和数据分别写入元数据区域和数据区域。根据本发明的方法,首先,使得系统避免了元数据页面写回引入的频繁随机的小写问题;其次,增加了写延迟的时间,让元数据和数据区域更大程度地吸收合并了部分IO请求,导致同一元数据对象下发到磁盘的多次更新操作合并成一次磁盘更新;再次,在元数据和数据区域中,实现Inode节点和数据块地顺序创建,减少了磁头寻道和定位的次数。

    一种固态盘及其读写操作方法

    公开(公告)号:CN104991738B

    公开(公告)日:2018-04-24

    申请号:CN201510345561.X

    申请日:2015-06-19

    Abstract: 本发明公开了一种固态盘及其读写操作方法。固态盘包括固态盘控制器、n+1个通道、m个SLC闪存芯片和m×n个MLC闪存芯片,其中,m和n均为正整数;m个SLC闪存芯片设置在n+1个通道的其中一个通道上,m×n个MLC闪存芯片设置在n+1个通道的剩余的n个通道上,剩余的n个通道中的每一个通道上均有m个MLC闪存芯片;SLC闪存芯片的存储容量较小,用于存储校验数据,MLC闪存芯片的存储容量较大,用于存储用户数据,SLC闪存芯片和MLC闪存芯片通过其所在的通道进行数据传输。本发明能有效地提高固态盘的使用寿命,降低存储系统的成本。

    一种数据中心的能源调度方法

    公开(公告)号:CN104217111B

    公开(公告)日:2017-07-11

    申请号:CN201410442483.0

    申请日:2014-09-02

    Abstract: 本发明公开了一种高效使用新能源的能源调度方法,以及辅助该方法实现的异构结点装置。它根据服务器上在一天二十四小时之内负载不均衡的特点,在低负载的情况下进行负载的调度,把低负载时间段内对能耗的需求降低,从而降低了整个系统一天内能耗的需求量。其中负载调度涉及在异构结点之间进行负载的分配策略;另外,将通过风能、太阳能等途径收集的有限新能源进行最高效化的利用。新能源的利用点包括两个,其一为在高负载的时间段,降低最高负载达到峰值对传统电能的需求,达到“削峰”的作用,其二为在一天中电费高的时间段尽可能多使用太阳能,即根据峰谷分时电价提高太阳能的使用价值,从而为服务商降低服务器的能耗以及电费。

    一种基于不同存储介质的分离式文件系统

    公开(公告)号:CN103902669B

    公开(公告)日:2017-06-16

    申请号:CN201410097343.4

    申请日:2014-03-17

    Abstract: 本发明公开了一种基于不同存储介质的分离式文件系统,不同存储介质包括非易失的小粒度读写的介质和非易失的大粒度读写的介质,非易失的小粒度读写的介质与内存总线相连,非易失的大粒度读写的介质与I/O总线相连;非易失的小粒度读写的介质用于存储文件系统的元数据,非易失的大粒度读写的介质用于存储文件系统的数据;非易失的小粒度读写的介质上,文件系统对元数据的操作使用小粒度的读写,非易失的大粒度读写的介质上,文件系统对数据的操作使用大粒度的读写。本发明将文件系统的元数据放在非易失的小粒度读写的介质上,且非易失的小粒度读写的介质与内存总线相连,加快了元数据操作的速度,能够有效地改善文件系统一致性和持久性的问题。

    一种固态盘及其读写操作方法

    公开(公告)号:CN104991738A

    公开(公告)日:2015-10-21

    申请号:CN201510345561.X

    申请日:2015-06-19

    Abstract: 本发明公开了一种固态盘及其读写操作方法。固态盘包括固态盘控制器、n+1个通道、m个SLC闪存芯片和m×n个MLC闪存芯片,其中,m和n均为正整数;m个SLC闪存芯片设置在n+1个通道的其中一个通道上,m×n个MLC闪存芯片设置在n+1个通道的剩余的n个通道上,剩余的n个通道中的每一个通道上均有m个MLC闪存芯片;SLC闪存芯片的存储容量较小,用于存储校验数据,MLC闪存芯片的存储容量较大,用于存储用户数据,SLC闪存芯片和MLC闪存芯片通过其所在的通道进行数据传输。本发明能有效地提高固态盘的使用寿命,降低存储系统的成本。

    数据中心的异构服务器系统及其能源调度方法

    公开(公告)号:CN104217111A

    公开(公告)日:2014-12-17

    申请号:CN201410442483.0

    申请日:2014-09-02

    Abstract: 本发明公开了一种高效使用新能源的能源调度方法,以及辅助该方法实现的异构结点装置。它根据服务器上在一天二十四小时之内负载不均衡的特点,在低负载的情况下进行负载的调度,把低负载时间段内对能耗的需求降低,从而降低了整个系统一天内能耗的需求量。其中负载调度涉及在异构结点之间进行负载的分配策略;另外,将通过风能、太阳能等途径收集的有限新能源进行最高效化的利用。新能源的利用点包括两个,其一为在高负载的时间段,降低最高负载达到峰值对传统电能的需求,达到“削峰”的作用,其二为在一天中电费高的时间段尽可能多使用太阳能,即根据峰谷分时电价提高太阳能的使用价值,从而为服务商降低服务器的能耗以及电费。

    一种面向数据处理的能耗优化数据集分配方法

    公开(公告)号:CN103927231A

    公开(公告)日:2014-07-16

    申请号:CN201410124657.9

    申请日:2014-03-31

    CPC classification number: Y02D10/22 Y02D10/36

    Abstract: 本发明公开了一种面向数据处理的能耗优化数据集分配方法,包括:把待分配数据集按照IOPS属性值从大到小依次排序形成待分配数据集队列,数据中心服务器也按照IOPS能力从大到小依次排序构成待分配服务器队列;同时创建已分配服务器队列和各个数据中心服务器的已分配数据集队列,从上述待分配数据集队列头部取出第一个待分配数据集,同时判断已分配服务器队列是否为空,若已分配服务器队列为空,则从待分配服务器队列头部选取第一台服务器作为当前数据中心服务器。本方法使得IOPS需求大的热点数据集得以集中分配在数据中心服务器上,避免了处理大规模数据过程中虚拟机的放置和迁移问题,达到了全面优化数据中心能耗值、平衡服务器负载的目的。

Patent Agency Ranking