公开(公告)号：CN117992300A

公开(公告)日：2024-05-07

申请号：CN202211387554.2

申请日：2022-11-07

Applicant: 华为技术有限公司 ,  北京大学

Inventor： 黄群 ,  孙海峰 ,  姚信 ,  陈力 ,  张弓

IPC: G06F11/30

Abstract: 本申请实施例公开了一种流式数据处理系统及其操作方法，属于流式数据处理技术领域。在该方法中，将第一应用程序编译为基于sketch的第二应用程序。由于sketch是一种将计算任务压缩为哈希表的数据结构，而通过哈希表进行运算所需的资源开销较少，因此通过本申请实施例提供的方法可以降低运行应用程序所需的资源开销，从而提高流式数据处理系统的数据处理速率。并且，编译第一应用程序时，考虑了用户设置的第一应用程序的目标精度，因此编译后的第二应用程序也满足用户的精度意图。因此，本申请实施例提供的方法可以实现在满足用户指定的精度意图的情况下提高流式数据处理系统的数据处理速率。

公开(公告)号：CN102135914B

公开(公告)日：2012-11-21

申请号：CN201110084332.9

申请日：2011-04-02

Applicant: 北京大学

Inventor： 肖臻 ,  黄群 ,  宋维佳

IPC: G06F9/50

Abstract: 本发明公布了一种可自动调节参数的云计算系统负载预测方法。包括：在时刻t，通过系统调用计算得到时刻t的系统实际负载O(t)；执行短期预测：利用O(t)值与历史数据计算α(t)与E(t)；执行长期预测：利用O(t)与历史数据计算αT(t)与ET(t)；综合短期预测与长期预测：当t＜T时，输出O(t)，转下一步；否则，取E(t-1)，ET(t-T)二者的最大值或者平均值作为时刻t的输出；更新历史数据，等待时刻t+1，转第一步。本发明通过误差函数实时计算α(t)与αT(t)，提高了经典EWMA的预测精度；通过将α(t)与αT(t)扩充到[-1，1]区间上，使得预测值能满足略大于实际值的需求；通过引入长期预测模块，提高了预测对云计算平台负载周期性的反应能力。

公开(公告)号：CN102135914A

公开(公告)日：2011-07-27

申请号：CN201110084332.9

申请日：2011-04-02

Applicant: 北京大学

Inventor： 肖臻 ,  黄群 ,  宋维佳

IPC: G06F9/50

Abstract: 本发明公布了一种可自动调节参数的云计算系统负载预测方法。包括：在时刻t，通过系统调用计算得到时刻t的系统实际负载O(t)；执行短期预测：利用O(t)值与历史数据计算α(t)与E(t)；执行长期预测：利用O(t)与历史数据计算αT(t)与ET(t)；综合短期预测与长期预测：当t＜T时，输出O(t)，转下一步；否则，取E(t-1)，ET(t-T)二者的最大值或者平均值作为时刻t的输出；更新历史数据，等待时刻t+1，转第一步。本发明通过误差函数实时计算α(t)与αT(t)，提高了经典EWMA的预测精度；通过将α(t)与αT(t)扩充到[-1，1]区间上，使得预测值能满足略大于实际值的需求；通过引入长期预测模块，提高了预测对云计算平台负载周期性的反应能力。

公开(公告)号：CN117667442A

公开(公告)日：2024-03-08

申请号：CN202211069550.X

申请日：2022-09-01

Applicant: 华为技术有限公司 ,  北京大学

Inventor： 黄群 ,  陈力 ,  姚信 ,  张弓 ,  孙海峰

IPC: G06F9/54

Abstract: 本申请提供了一种数据读写的方法、装置和系统，能够节省数据读写的通信开销、提高数据读写的效率。当第二节点需要向第一节点写入第一数据时，第一节点将用于写入第一数据的第一环形缓存区的地址信息发送给第二节点，第一节点的RDMA内存空间中包括第一环形缓存区；第二节点根据所述第一环形缓存区的地址信息，将第一数据写入第一环形缓存区。当第三节点需要从第一节点读出第二数据时，第一节点将存储有第二数据的第二环形缓存区的地址信息发送给第三节点，第一节点的RDMA内存空间中包括第二环形缓存区；第三节点根据所述第二环形缓存区的地址信息，从第一节点的第二环形缓存区读出第二数据。