AB实验数据处理方法、装置、服务器及介质

    公开(公告)号:CN111784173A

    公开(公告)日:2020-10-16

    申请号:CN202010659019.2

    申请日:2020-07-09

    Abstract: 本说明书实施例公开一种AB实验数据处理方法、装置、服务器及介质,在所述方法中,将目标业务场景下的低响应用户数据划分为实验组数据以及对照组数据,并基于低响应用户在AB实验开始前的历史用户数据,对实验组数据以及对照组数据进行修正,得到对照组修正数据以及实验组修正数据,修正后数据的方差得到了缩减,提高了实验分析的灵敏度,基于对照组修正数据基于实验组修正数据,对AB实验的局部平均处理效果进行估计,确定AB实验的显著性,有效的估计出实际受到实验影响的用户的实验效果,有效改善低响应场景下实验效果被稀释的问题。

    网络实验分流、节点关系预测方法、装置以及设备

    公开(公告)号:CN113283925B

    公开(公告)日:2022-08-02

    申请号:CN202110396428.2

    申请日:2021-04-13

    Abstract: 本说明书实施例公开了网络实验分流方法。方案包括:获取多用户拓扑图,并确定其中的两个指定节点;根据两个指定节点与其附近节点之间的位置关系,为附近节点进行编码,得到附近编码,作为该附近节点的特征之一;从多用户拓扑图提取对应的两个拓扑子图,拓扑子图包括一个指定节点,以及该指定节点的附近节点;将拓扑子图中的各节点的特征输入图模型得到向量表示,各节点的向量表示包括指定节点的向量表示;根据两个指定节点的向量表示,以及两个指定节点之间的其他已确定关系的向量表示,预测两个指定节点之间待预测关系边成立的可能性;根据待预测关系边成立的可能性,将多个用户向不同组分流,并尝试进行对应的业务处理,获得相应的实验结果。

    A/B测试方法、装置及电子设备

    公开(公告)号:CN111309614A

    公开(公告)日:2020-06-19

    申请号:CN202010097674.3

    申请日:2020-02-17

    Abstract: 本说明书实施例公开了一种A/B测试方法、装置及电子设备,其技术方案实质是,确定在A/B测试中的测试版本所分配的测试用户组,从所述测试用户组采集所述测试版本在运行时产生的测试指标数据,将这些测试指标数据与测试指标数据所属用户关联的历史指标数据进行比较,根据比较结果确定所述测试版本的评估指标,以利用所述评估指标评估所述测试版本是否达到预设指标条件。

    A/B测试方法、装置及电子设备

    公开(公告)号:CN111309614B

    公开(公告)日:2022-10-18

    申请号:CN202010097674.3

    申请日:2020-02-17

    Abstract: 本说明书实施例公开了一种A/B测试方法、装置及电子设备,其技术方案实质是,确定在A/B测试中的测试版本所分配的测试用户组,从所述测试用户组采集所述测试版本在运行时产生的测试指标数据,将这些测试指标数据与测试指标数据所属用户关联的历史指标数据进行比较,根据比较结果确定所述测试版本的评估指标,以利用所述评估指标评估所述测试版本是否达到预设指标条件。

    一种分组测试方法及装置

    公开(公告)号:CN111552649B

    公开(公告)日:2022-02-22

    申请号:CN202010421737.6

    申请日:2020-05-18

    Abstract: 本说明书公开了一种分组测试方法及装置。所述方法包括:根据所确定的图分割算法以及该算法的初始参数值,将图结构划分为多个子图;根据当前的划分结果,确定参数值更新策略;循环执行以下操作,直到满足预设的循环停止条件:针对当前的划分结果,利用预设的损失函数计算当前划分结果对应的当前损失函数值;判断当前损失函数值是否满足预设的循环停止条件;如果否,则根据所确定的参数值更新策略,对当前的参数值进行更新;并且根据更新后的参数值,将所述图结构划分为多个子图;循环结束后,根据当前的划分结果,将至少两个子图对应的用户子集确定为随机测试的对象用户。

    AB实验数据处理方法、装置、服务器及介质

    公开(公告)号:CN111784173B

    公开(公告)日:2022-06-03

    申请号:CN202010659019.2

    申请日:2020-07-09

    Abstract: 本说明书实施例公开一种AB实验数据处理方法、装置、服务器及介质,在所述方法中,将目标业务场景下的低响应用户数据划分为实验组数据以及对照组数据,并基于低响应用户在AB实验开始前的历史用户数据,对实验组数据以及对照组数据进行修正,得到对照组修正数据以及实验组修正数据,修正后数据的方差得到了缩减,提高了实验分析的灵敏度,基于对照组修正数据基于实验组修正数据,对AB实验的局部平均处理效果进行估计,确定AB实验的显著性,有效的估计出实际受到实验影响的用户的实验效果,有效改善低响应场景下实验效果被稀释的问题。

    网络实验分流、节点关系预测方法、装置以及设备

    公开(公告)号:CN113283925A

    公开(公告)日:2021-08-20

    申请号:CN202110396428.2

    申请日:2021-04-13

    Abstract: 本说明书实施例公开了网络实验分流方法。方案包括:获取多用户拓扑图,并确定其中的两个指定节点;根据两个指定节点与其附近节点之间的位置关系,为附近节点进行编码,得到附近编码,作为该附近节点的特征之一;从多用户拓扑图提取对应的两个拓扑子图,拓扑子图包括一个指定节点,以及该指定节点的附近节点;将拓扑子图中的各节点的特征输入图模型得到向量表示,各节点的向量表示包括指定节点的向量表示;根据两个指定节点的向量表示,以及两个指定节点之间的其他已确定关系的向量表示,预测两个指定节点之间待预测关系边成立的可能性;根据待预测关系边成立的可能性,将多个用户向不同组分流,并尝试进行对应的业务处理,获得相应的实验结果。

    一种分组测试方法及装置

    公开(公告)号:CN111552649A

    公开(公告)日:2020-08-18

    申请号:CN202010421737.6

    申请日:2020-05-18

    Abstract: 本说明书公开了一种分组测试方法及装置。所述方法包括:根据所确定的图分割算法以及该算法的初始参数值,将图结构划分为多个子图;根据当前的划分结果,确定参数值更新策略;循环执行以下操作,直到满足预设的循环停止条件:针对当前的划分结果,利用预设的损失函数计算当前划分结果对应的当前损失函数值;判断当前损失函数值是否满足预设的循环停止条件;如果否,则根据所确定的参数值更新策略,对当前的参数值进行更新;并且根据更新后的参数值,将所述图结构划分为多个子图;循环结束后,根据当前的划分结果,将至少两个子图对应的用户子集确定为随机测试的对象用户。

Patent Agency Ranking