-
公开(公告)号:CN106650948A
公开(公告)日:2017-05-10
申请号:CN201611130182.X
申请日:2016-12-09
Applicant: 曙光信息产业(北京)有限公司
IPC: G06N99/00
CPC classification number: G06N20/00
Abstract: 本发明公开了一种机器学习中避免大数据冗余的方法,包括以下步骤:S1、将训练数据按照预设规则均匀划分为规模相当的若干份;S2、对每一份数据按照预设的训练步骤进行训练计算,并绘制出跟随训练步骤的属性值曲线;S3、根据每份属性值曲线的相似度,保留相应的属性值曲线对应的数据和初步训练结果;S4、根据属性值曲线的相似度对保留的数据和初步训练结果进行排序,将相邻的相似度达到阈值的属性值曲线对应的数据和初步训练结果分别进行加权,返回步骤S2,直至所有训练数据合并为一个数据,并得到最终的训练结果。本发明操作简单,易于实现,并行度较高,极大的减小了计算量,提高了计算效率。
-
公开(公告)号:CN106650931A
公开(公告)日:2017-05-10
申请号:CN201611132257.8
申请日:2016-12-09
Applicant: 曙光信息产业(北京)有限公司
IPC: G06N3/08
CPC classification number: G06N3/08
Abstract: 本发明涉及深度学习算法的技术领域,具体涉及一种混合精度深度学习算法;所要解决的技术问题在于:提供一种既保证了计算精度不变,又提高了计算效率的混合精度深度学习算法;采用的技术方案为:包括以下步骤:S101、利用单精度众核处理器进行前向传播计算,对每一网络层计算出每一个神经元的值;S102、利用单精度众核处理器进行后向传播计算,对每一网络层计算出误差残量值;S103、利用单精度众核处理器计算权值的增量;S104、将单精度众核处理器计算出的增量权值更新到高精度众核处理器计算出的增量权值上,完成一次迭代计算。本发明适用于深度学习领域。
-
公开(公告)号:CN106599996A
公开(公告)日:2017-04-26
申请号:CN201611131888.8
申请日:2016-12-09
Applicant: 曙光信息产业(北京)有限公司
IPC: G06N3/08
CPC classification number: G06N3/084
Abstract: 本发明公开了一种深度学习网络结构算法,该深度学习网络结构算法确定各网络层之间的连接关系时,包括以下步骤:S101、从待训练数据中收集原数据的一个子集;S102、利用样本数据进行全连接训练,直到收敛;S103、设置一个阈值,得出稀疏连接表;S104、利用新的稀疏连接表对原数据进行计算;适用于3D打印机领域;本发明适用于深度学习算法领域。能够提供一种既能提高计算效率,又能保证计算精度的深度学习网络结构算法。
-
公开(公告)号:CN101699560B
公开(公告)日:2012-12-12
申请号:CN200910235298.3
申请日:2009-09-30
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明提出了一种内存控制器以及多内存系统,该内存控制器包括双数据速率DDR控制器和至少一个信号寄存器,其中,DDR控制器用于根据中央处理器的指令产生内存驱动信号,内存驱动信号包括第一信号线组和第二信号线组,其中每一组第二信号线组适于与相对应的内存中的两个内存颗粒连接;信号寄存器用于对DDR控制器输出的第一信号线组进行功率放大和整形,其中每一组经过功率放大和整形的第一信号线组适于与相对应的内存中的每个内存颗粒连接。本发明所提出的内存控制器以及多内存系统可以增强内存控制器的驱动能力,降低系统成本。
-
-
公开(公告)号:CN102123318A
公开(公告)日:2011-07-13
申请号:CN201010611500.0
申请日:2010-12-17
Applicant: 曙光信息产业(北京)有限公司
IPC: H04N21/433
Abstract: 本发明提供了一种IPTV应用的IO加速方法,增加了预取缓存层,服务器检测磁盘IO性能及客户端访问的IO压力;服务器根据到的检测磁盘IO性能及客户端访问的IO压力,确定预取策略,预取策略可以为保守式预取、贪婪式预取和满足式预取;本发明中所提出的缓存和预取模块直接位于存储设备之上,因此在此所作的各种排序或合并操作都直接作用于具体的存储设备,不再有其它中间层。所以,各种策略的优势都可以充分发挥,而不再会被其它层所干扰,有效提高了磁盘的存储性能。
-
公开(公告)号:CN102023897A
公开(公告)日:2011-04-20
申请号:CN201010536484.3
申请日:2010-11-04
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明提供了一种众核环境下视频编解码动态多分辨率自适应的并行方法和系统。包括系统初始化模块,输入模块,解码模块,输出模块以及统计和状态监测模块。本发明可以动态的根据系统中的码流格式和分辨率分布来调整各个核心的运行任务,从而对于不同码流格式和不同分辨率的都能获得充分的解码计算资源,保证系统的质量和性能。
-
公开(公告)号:CN104618329B
公开(公告)日:2018-06-05
申请号:CN201410835046.5
申请日:2014-12-26
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明公开了一种数据处理方法,该数据处理方法包括:主控板接收客户端发送的请求信息;主控板根据请求信息得到处理信息,处理信息包括以下至少之一:用户信息、五元组信息、hash值;主控板将处理信息发送至业务板或客户端。本发明通过主控板接收客户端发送的请求信息,然后主控板根据请求信息得到处理信息,处理信息至少要包括用户信息、五元组信息、hash值中的一个,随后主控板将处理信息发送到业务板或客户端,从而将业务板中与数据处理无关或者关联较小且耗费计算资源的工作进行拆分,让主控板来做一些工作,从而可以有效节省业务板的资源,充分利用主控板资源,使得业务板处理数据能力有很大的提高。
-
公开(公告)号:CN102521147B
公开(公告)日:2015-03-25
申请号:CN201110364311.2
申请日:2011-11-17
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F12/08
Abstract: 本发明提供了一种使用高速非易失介质做缓存的管理方法,使用固态硬盘做为缓存设备,每个缓存设备可以被多个磁盘共享,每个磁盘只能使用一个缓存设备;所述缓存设备划分region结构,缓存设备与磁盘之间采用组映射相连;缓存设备划分为两部分,前面部分存储内存中的region数据结构,后面部分为缓存。本发明采取将元数据实时写入固态硬盘的策略来解决这个问题,在脏数据写进固态硬盘的同时,管理这些数据的元数据也被同步到固态硬盘的指定位置,只要重启时读出这些元数据即可将所有缓存在固态硬盘而没有写入传统磁盘的数据读出,从而所有的数据在系统崩溃和掉电的情况下也能保证不丢失。
-
公开(公告)号:CN102404398B
公开(公告)日:2015-03-25
申请号:CN201110364295.7
申请日:2011-11-17
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明提供了一种支持多客户端的RDMA消息发送方法,服务器和客户端之间通过高速的InfiniBand连接,服务器首先对InfiniBand环境进行初始化,并在任意时刻接受客户端的注册,一旦注册成功即可以通过InfiniBand网络向多个客户端高速发送数据,期间,任何地方出现错误都可以将所有环境重建以保证传输的正确进行;客户端从服务器接受数据并正确处理,整个流程受超时机制的控制,一旦在超时时限到达的时候收不到数据,则认为链路出现问题,客户端主动重连服务器。
-
-
-
-
-
-
-
-
-