一种基于强化学习的实时网络路由优化方法及装置

    公开(公告)号:CN116527564A

    公开(公告)日:2023-08-01

    申请号:CN202310531010.7

    申请日:2023-05-11

    Applicant: 清华大学

    Inventor: 杨华 李振华

    Abstract: 本申请实施例中提供了一种基于强化学习的实时网络路由优化方法及装置,所述方法包括:将源网络设备节点的信息、目标网络设备节点的信息以及当前网络设备节点的信息,输入预先训练的网络路由模型,得到所述网络路由模型输出的由所述当前网络设备节点到所述目标网络设备节点的最短路由路径;将数据包由所述当前网络设备节点,传输至所述最短路由路径中的第一个网络设备节点,所述第一个网络设备节点为所述当前网络设备节点的下一跳网络设备节点。在本申请实施例中,通过将网络路由问题转换为旅行商问题实现路由优化,同时强化学习能够更好的感知网络环境的动态性和实时性,实现在复杂网络环境下自适应地选择最佳路由,从而提高整个网络的通讯效率。

    一种针对指定专家的信息爬取系统及方法

    公开(公告)号:CN110781368A

    公开(公告)日:2020-02-11

    申请号:CN201911008059.4

    申请日:2019-10-22

    Abstract: 本发明涉及互联网技术技术领域,尤其为一种针对指定专家的信息爬取系统及方法,包括用户交互模块、候选列表爬取模块、专家信息爬取模块、数据清洗模块、数据结构化模块和专家画像模块,本发明通过设计解决现有的网络爬虫技术中,将网络上的专家数据集中爬取后存在数据库和云端中,但是这种方法需要占用较多的存储空间和服务器资源,也需要在数据的全面性和维护成本之间进行取舍,从而能准确的返回用户指定的专家信息,无需在搜索引擎中进行搜索和确认,节省了用户的时间成本,能整合多个数据源的专家数据,避免了在单一数据源中搜索不到对应专家的问题同时将大量专家数据存储在数据库和云端的方式,能够节省大量的数据库空间和维护成本。

    一种虚拟机启动进度监控方法及装置

    公开(公告)号:CN106844148B

    公开(公告)日:2020-01-14

    申请号:CN201611263037.9

    申请日:2016-12-30

    Applicant: 清华大学

    Abstract: 本发明提供一种虚拟机启动进度监控方法及装置,其中所述方法包括:第一代理向第二代理发起虚拟机启动进度监控请求,监控请求中携带有虚拟机的第一标识;第二代理根据监控请求,为第一标识对应的虚拟机建立一个线程;第二代理通过监控串口输出判断虚拟机中操作系统是否有信息输出;若否,第二代理根据线程读取虚拟机所在进程的进程信息并输出,根据虚拟机所在进程的进程信息计算虚拟机的启动进度,若是,第二代理输出虚拟机中操作系统的输出信息,根据虚拟机中操作系统的输出信息计算虚拟机的启动进度;第二代理将虚拟机的启动进度返回给第一代理。所述装置包括:第一代理模块和第二代理模块。本发明实现了虚拟机启动进度的监控。

    基于云的二值向量距离计算方法、装置及服务器

    公开(公告)号:CN104580500B

    公开(公告)日:2018-07-27

    申请号:CN201510035878.3

    申请日:2015-01-23

    Applicant: 清华大学

    Abstract: 本发明公开种基于云的二值向量距离计算方法、装置及服务器,能够解决现有的基于云的二值向量距离计算不能保护用户隐私的问题。所述方法包括:获取预先确定的要与当前用户的二值向量进行距离计算的二值向量所属用户所对应的Paillier加密的公钥PK和私钥SK,随机种子s,两个对称加密密钥K和K,利用PK分别对0和1进行加密的加密结果HE.E(0)和HE.E(1);从云服务器获取的每比特位的扰码电路的所有可能的输入;对的每比特位进行编码确定出的对应比特位的扰码电路的输入,并将的每比特位的扰码电路的输入发送给云服务器;接收云服务器发送的利用PK对和之间的距离进行加密的加密结果;利用SK对加密结果进行解密,确定出和之间的距离。

    机动车尾气颗粒物和挥发性有机污染物分工况采样系统

    公开(公告)号:CN108106887A

    公开(公告)日:2018-06-01

    申请号:CN201711464910.5

    申请日:2017-12-28

    Applicant: 清华大学

    Abstract: 为了解决现有分时间段离线采样方法无法反映车辆在各种工况下的排放特征的技术问题,本发明提供了一种可用于实际道路车载测试的机动车尾气颗粒物和挥发性有机污染物分工况采样系统。本发明通过设置多个并行的采样通道,利用分工况采样控制器根据瞬态车速/尾气流量控制采样通道的启闭,从而实现挥发性有机物、颗粒物和半挥发性有机物的分工况同步采样,采样结果能很好的反映车辆在不同工况下的排放特征。本发明适用范围广,可灵活设定相应采集通道的数量和每个通道的车速/流量范围,以满足不同的测试需求。

    安卓系统中应用程序恶意行为检测方法和设备

    公开(公告)号:CN107609397A

    公开(公告)日:2018-01-19

    申请号:CN201710667707.1

    申请日:2017-08-07

    Applicant: 清华大学

    Inventor: 严宇轩 李振华

    Abstract: 本发明提供一种安卓系统中应用程序恶意行为检测方法和设备用于解决通过叠加窗口的盗取用户信息的恶意程序的检测问题。其中若检测到输入指令,则检测是否存在窗口覆盖,若存在,则根据预设的检测内容,检测顶层显示的窗口W及所述顶层显示的窗口W所对应的应用程序X;根据检测结果判断窗口覆盖是否是恶意的。根据窗口W和应用程序X的属性和行为判断窗口W的出现是否是恶意的,从而解决通过叠加窗口的盗取用户信息的恶意程序的检测问题。

    一种缓冲式云存储数据同步的方法和装置

    公开(公告)号:CN104408048A

    公开(公告)日:2015-03-11

    申请号:CN201410584308.5

    申请日:2014-10-27

    Applicant: 清华大学

    Inventor: 李振华 刘云浩

    CPC classification number: G06F17/30174 G06F17/30203

    Abstract: 本发明提供一种缓冲式云存储数据同步方法和装置,解决了当对用户数据进行频繁短促的更新时造成的同步流量浪费的技术问题。包括:中间件装置接收待存储在云端的第一文件,第一文件为用户设备中的文件;中间件装置获取第一文件的容量值,判断第一文件的容量值是否大于等于预设阈值;在第一文件的容量值小于预设阈值,且中间件装置在接收第一文件之后的第一预设时间段内没有接收到第二文件时,将第一文件发送至与云端连接的云存储同步文件夹中,其中,第二文件为待存储在云端的文件。本发明利用批量同步的方法及装置,有效降低云存储应用的网络流量开销,并且不会对用户体验造成明显影响。

    一种压铸模具多点精确控温系统及方法

    公开(公告)号:CN101797634B

    公开(公告)日:2012-07-04

    申请号:CN201010141498.5

    申请日:2010-03-25

    Applicant: 清华大学

    Abstract: 本发明涉及一种压铸模具多点精确控温系统及方法,其特征在于:它包括嵌入在模具内的多个温度检测装置,每一所述温度检测装置分别通过一补偿导线连接一模拟量输入模块,所述模拟量输入模块连接一中央处理单元,所述中央处理单元分别连接一人机交互界面和一模温机;所述模温机上设置有若干条进油管和若干条出油管,所述进油管和出油管分别与所述模具上的多条流道连通形成循环流通管道。本发明结构设计巧妙,能提高压铸过程中模具温度控制的可重复性,提高生产效率,可广泛用于压铸生产的控温过程中。

    移动云游戏图形管线降低时延的方法、系统、设备及介质

    公开(公告)号:CN118615693A

    公开(公告)日:2024-09-10

    申请号:CN202410672167.6

    申请日:2024-05-28

    Applicant: 清华大学

    Abstract: 本申请提供一种移动云游戏图形管线降低时延的方法、系统、设备及介质,涉及云游戏技术领域,通过云端在移动游戏运行时,识别云端虚拟机发出的游戏渲染指令,直接提取游戏渲染的原始游戏帧;在不对原始游戏帧进行拷贝的情况下,对所述原始游戏帧进行编码并直接发送至客户端,以绕过云端图形管线中的第二云端垂直同步事件和第三云端垂直同步事件,所述第二云端垂直同步事件用于触发云端进行云端图层合成,所述第三云端垂直同步事件用于触发云端进行云端虚拟显示。通过减少图形游戏管线中的垂直同步事件,降低垂直同步事件带来的交互时延。

    机动车尾气颗粒物和挥发性有机污染物分工况采样系统

    公开(公告)号:CN108106887B

    公开(公告)日:2024-04-09

    申请号:CN201711464910.5

    申请日:2017-12-28

    Applicant: 清华大学

    Abstract: 为了解决现有分时间段离线采样方法无法反映车辆在各种工况下的排放特征的技术问题,本发明提供了一种可用于实际道路车载测试的机动车尾气颗粒物和挥发性有机污染物分工况采样系统。本发明通过设置多个并行的采样通道,利用分工况采样控制器根据瞬态车速/尾气流量控制采样通道的启闭,从而实现挥发性有机物、颗粒物和半挥发性有机物的分工况同步采样,采样结果能很好的反映车辆在不同工况下的排放特征。本发明适用范围广,可灵活设定相应采集通道的数量和每个通道的车速/流量范围,以满足不同的测试需求。

Patent Agency Ranking