计算机集群的资源调度方法及系统

    公开(公告)号:CN105468458B

    公开(公告)日:2019-04-19

    申请号:CN201510846500.1

    申请日:2015-11-26

    Abstract: 本发明提供一种计算机集群的资源调度方法及系统,所述方法包括:监控计算节点运行的负载在第t个资源分配周期内的资源占用量及计算节点的空余资源量;根据监控获得的负载在第t个资源分配周期内的资源占用量预测各个负载在第t+1个资源分配周期内的资源占用量;根据预测得到的负载在所述第t+1个资源分配周期内的资源占用量及监控得到的空余资源量确定所述计算节点在所述第t+1个资源分配周期内的可用资源量;将所述计算节点在所述第t+1个资源分配周期内的可用资源量发送给资源管理器,使资源管理器根据所述可用资源量分配资源。本发明提供的计算机集群的资源调度方法及系统,能够提高所述计算节点的资源利用率及负载的服务质量。

    一种基于知识图谱的问答方法

    公开(公告)号:CN107748757A

    公开(公告)日:2018-03-02

    申请号:CN201710858596.2

    申请日:2017-09-21

    Abstract: 本发明提供一种基于知识图谱的问答方法。本发明提供的一种基于知识图谱的问答方法由主体实体匹配,关系匹配以及答案确定来实现。主题实体匹配主要包括命名实体识别和实体链接两个部分。命名实体识别旨在识别自然语言问句q中人名、地名、组织机构名等命名实体。实体链接将识别出的命名实体对应到知识库中的某一个实体上,即找到三元组中的实体s,关系匹配是通过自然语言理解技术理解问句q所表达的语义,并且与搜索空间中三元组(s,p,o)中的关系p进行匹配,以此确定问句所表达的语义及其与知识库中对应的关系。通过实体识别和实体链接得到候选主题实体,关系匹配能够得到候选关系,由此得到若干候选三元组,答案确定需要根据实体识别得分,关系匹配得分等特征对这些候选三元组进行排序,确定最后答案。

    一种实现大规模容器快速部署的方法

    公开(公告)号:CN107729020A

    公开(公告)日:2018-02-23

    申请号:CN201710939453.4

    申请日:2017-10-11

    Abstract: 本发明提出一种实现大规模容器快速部署的方法,采用块存储服务RBD将集群中所有镜像的数据存储于网络存储中,在所述RBD中,容器镜像以分层结构存储,每个镜像对应一个Ceph块设备,其中父镜像和子镜像之间的冗余数据被剔除,对父Ceph块设备做快照,然后克隆快照,生成与做快照时的父块设备相同的块设备作为子Ceph块设备,所述Ceph块设备的写时拷贝粒度是对象,所述对象为Ceph中的基本存储单元,容器部署的仓库仅作为一个元数据服务器,其中只存储了镜像列表、镜像的层次信息和镜像层与Ceph块设备之间的映射关系。

    一种基于aufs文件系统的热迁徙方法和系统

    公开(公告)号:CN107704618A

    公开(公告)日:2018-02-16

    申请号:CN201711019980.X

    申请日:2017-10-27

    CPC classification number: G06F16/119

    Abstract: 本发明提供一种基于aufs文件系统的热迁徙方法和系统,针对docker容器使用的aufs文件系统,分别在不同云环境的源端和目的端首先建立镜像仓库,在迁移开始后,逐层检测源节点容器使用的文件系统,对底层的只读层,源端只传送该层的标识符到目的端,目的端收到源端的标识符后,检测该层是否存在于镜像仓库,如果存在,则从镜像仓库中取出该层镜像,迭代这个过程,直到该层不存在于目的端的仓库或者遇到可写层。然后利用c/r方法,冻结容器进程,获取容器的内存页,然后将内存页和可写层的内容传输到目的端,在目的端恢复容器运行。本发明可以在减少传输数据量的同时也极大的减少容器的停机时间。

    一种社交网络事件的实时增量式检测方法和系统

    公开(公告)号:CN104281670B

    公开(公告)日:2017-12-15

    申请号:CN201410509359.1

    申请日:2014-09-28

    Abstract: 本发明提供一种社交网络事件的实时增量式检测方法和系统,通过采用概率图模型,根据短文本的时间、文档和主题标签,对短文本进行模型学习,获得似然函数;采用EM算法,对似然函数进行求解,获得参数;采用增量更新方式,对所获得的参数进行迭代更新,直至参数收敛;采用分布式方式,根据收敛后的参数执行EM算法中的E步和M步,计算获得短文档的内容,从而解决了现有技术中的事件检测均不能同时适应社交网络中的短文本的实时性、社会化以及碎片化特征,导致检测结果不准确的技术问题。并且,提出了有监督的短文本事件检测模型,增量学习与预测相结合的算法和基于内存计算平台的事件检测模型。

    机器学习方法和从节点
    16.
    发明公开

    公开(公告)号:CN106815644A

    公开(公告)日:2017-06-09

    申请号:CN201710061671.2

    申请日:2017-01-26

    CPC classification number: G06N99/005

    Abstract: 本发明提供一种机器学习方法和从节点。本发明提供的机器学习方法,应用于机器学习系统,所述机器学习系统包括分布式共享内存的参数服务器、主节点和多个从节点;所述参数服务器用于存储全局模型参数和全局训练数据;所述主节点用于根据全局数据处理任务,确定每个从节点的数据处理任务,所述方法包括:从节点从所述参数服务器中获取所述从节点的数据处理任务对应的第一训练数据块,并按照所述从节点的数据处理任务对所述第一训练数据块进行处理,得到第一处理数据块。本发明提供的机器学习方法和从节点,无需借助外部其他设备,就可以对训练数据进行全局数据处理。

    基于虚拟机集群的回滚方法及系统和服务器

    公开(公告)号:CN105718325A

    公开(公告)日:2016-06-29

    申请号:CN201610044580.3

    申请日:2016-01-22

    Abstract: 本发明提供一种基于虚拟机集群的回滚方法及系统和服务器,该方法包括:在检测到虚拟机集群中的至少一个虚拟机异常时,从内存中获取虚拟机集群中的所有重复页面和除重复页面以外的剩余页面,并确定各重复页面与各虚拟机之间的映射关系,以及各剩余页面与各虚拟机之间的映射关系;根据各重复页面与各虚拟机之间的映射关系,将各重复页面通过组播的传输方式发送给对应的虚拟机;并根据各剩余页面与各虚拟机之间的映射关系,将各剩余页面通过单播的传输方式发送给对应的虚拟机;以使虚拟机集群中的各虚拟机恢复异常前的正常状态。本发明提供的基于虚拟机集群的回滚方法及系统和服务器,缩短了虚拟机集群恢复的时间,降低了恢复时的网络占用量。

    计算机集群的资源调度方法及系统

    公开(公告)号:CN105468458A

    公开(公告)日:2016-04-06

    申请号:CN201510846500.1

    申请日:2015-11-26

    Abstract: 本发明提供一种计算机集群的资源调度方法及系统,所述方法包括:监控计算机节点运行的负载在第t个资源分配周期内的资源占用量及计算节点的空余资源量;根据监控获得的负载在第t个资源分配周期内的资源占用量预测各个负载在第t+1个资源分配周期内的资源占用量;根据预测得到的负载在所述第t+1个资源分配周期内的资源占用量及监控得到的空余资源量确定所述计算节点在所述第t+1个资源分配周期内的可用资源量;将所述计算节点在所述第t+1个资源分配周期内的可用资源量发送给资源管理器,使资源管理器根据所述可用资源量分配资源。本发明提供的计算机集群的资源调度方法及系统,能够提高所述计算机节点的资源利用率及负载的服务质量。

    基于KVM的虚拟机迁移方法及系统

    公开(公告)号:CN103036947B

    公开(公告)日:2015-05-20

    申请号:CN201210477637.0

    申请日:2012-11-21

    Abstract: 本发明提供了一种基于KVM的虚拟机迁移方法及系统,包括:源虚拟机将源虚拟机的CPU寄存器及内存信息同步到目标虚拟机,之后记录发生的不确定事件的信息;源虚拟机根据第一传送指令将在接收到第一传送指令之前未传送至目标虚拟机的不确定事件的信息传送至目标虚拟机;目标虚拟机对源虚拟机的不确定事件的信息进行重放操作,传输与重放过程迭代进行,当传送的不确定事件的信息的个数小于等于预设个数阈值时,源虚拟机停机,将之前未传送的不确定事件进行传送,目标虚拟机进行重放,从而完成虚拟机的迁移。本发明将不确定事件进行记录重放并重放代替现有技术中的内存迭代拷贝方法可以大大的减少传送数据量,降低迁移过程中的迭代传送时间。

    基于地理位置的社交网络事件分析方法及系统

    公开(公告)号:CN104615715A

    公开(公告)日:2015-05-13

    申请号:CN201510061722.2

    申请日:2015-02-05

    Abstract: 本发明提供一种基于地理位置的社交网络事件分析方法及系统,包括:对每个社交网络数据文本进行分词处理,获得所述社交网络数据文本的词;建立所述社交网络数据文本对应的地理位置与所述社交网络数据文本的映射关系,所述社交网络数据文本对应的地理位置为所述社交网络数据文本的词中,与地理位置相关的词;确定预设的各目标地理位置对应的社交网络数据文本;针对每个目标地理位置,对所述目标地理位置对应的社交网络数据文本的词进行权重计算,获得并将所述目标地理位置对应的社交网络数据文本的关键词,作为所述目标地理位置的热门事件进行推送。通过本发明提供的方案,可以帮助用户直观的获取到地理位置相关的热门事件。

Patent Agency Ranking