[發明專利]AB測試系統指標置信區間的計算方法、裝置和服務器

有效

• 申請號: 201810266136.5
• 申請日: 2018-03-28
• 公開（公告）號: CN108415845B
• 公開（公告）日: 2019-05-31
• 發明（設計）人: 敖紅波;楊水石;黃柏翔
• 申請（專利權）人: 北京達佳互聯信息技術有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36
• 代理公司: 北京市立方律師事務所 11330
• 代理人: 劉延喜

1.一種AB測試系統指標置信區間的計算方法，其特征在于，包括以下步驟：

將AB測試系統管理的流量進行第一預設值次全局劃分，得到各次全局劃分下對應分成的若干個組，所述各次全局劃分之間相互平行；

計算各次全局劃分對應的若干個組對應的指標值，得到各次全局劃分相應數量的若干個數值；

根據從各次全局劃分的若干數值中隨機抽取的數值，得到各次全局劃分中第二預設值個分組大小對應的差異值；

合并各次全局劃分中所述第二預設值個分組大小對應的差異值；

根據合并后的差異值，得到置信區間。

2.根據權利要求1所述的方法，其特征在于，所述合并各次全局劃分中所述第二預設值個分組大小對應的差異值，包括以下步驟：

整合各次全局劃分中所述第二預設值個分組大小對應的差異值，獲得第三預設值個分組大小對應的差異值；

將所述第三預設值個分組大小對應的差異值升序排列，獲得數列；

其中，所述第三預設值為第一預設值*第二預設值。

3.根據權利要求2所述的方法，其特征在于，所述根據合并后的差異值，得到置信區間，包括以下步驟：

將置信水平乘以所述第三預設值，取整后得到的數值作為索引值；

將根據所述索引值在所述數列中查找到的差異值，作為所述置信水平對應的差異值；

根據所述置信水平對應的差異值，得到置信區間。

4.根據權利要求1所述的方法，其特征在于，所述根據從各次全局劃分的若干數值中隨機抽取的數值，得到各次全局劃分中第二預設值個分組大小對應的差異值，包括以下步驟：

根據從各次全局劃分的若干個數值中隨機抽取的數值，計算各次全局劃分中單個分組大小對應的差異值；

循環所述根據從各次全局劃分的若干個數值中隨機抽取的數值，計算各次全局劃分中單個分組大小對應的差異值的步驟，直至得到各次全局劃分中第二預設值個分組大小對應的差異值。

5.根據權利要求4所述的方法，其特征在于，所述根據從各次全局劃分的若干個數值中隨機抽取的數值，計算各次全局劃分中單個分組大小對應的差異值，包括以下步驟：

對從各次全局劃分的若干個數值中隨機抽取第四預設值個數值求和，得到各次全局劃分中的第一樣本和；

對從各次全局劃分的剩余的若干個數值中隨機抽取第四預設值個數值求和，得到各次全局劃分的第二樣本和；

將的值作為各次全局劃分中單個分組大小對應的差異值。

6.根據權利要求1所述的方法，其特征在于，所述將AB測試系統管理的流量進行第一預設值次全局劃分中，各次全局劃分均將全部用戶劃分到不同的組中，且每個用戶只屬于一個組。

7.一種AB測試系統指標置信區間的計算裝置，其特征在于，包括以下模塊：

劃分模塊，用于將AB測試系統管理的流量進行第一預設值次全局劃分，得到各次全局劃分下對應分成的若干個組，所述各次全局劃分之間相互平行；

第一計算模塊，用于計算各次全局劃分對應的若干個組對應的指標值，得到各次全局劃分相應數量的若干個數值；

第二計算模塊，用于根據從各次全局劃分的若干數值中隨機抽取的數值，得到各次全局劃分中第二預設值個分組大小對應的差異值；

合并模塊，用于合并各次全局劃分中所述第二預設值個分組大小對應的差異值；

第三計算模塊，用于根據合并后的差異值，得到置信區間。

8.根據權利要求7所述的裝置，其特征在于，所述合并模塊包括以下單元：

整合單元，用于整合各次全局劃分中所述第二預設值個分組大小對應的差異值，獲得第三預設值個分組大小對應的差異值；

排序單元，用于將所述第三預設值個分組大小對應的差異值升序排列，獲得數列；

其中，所述第三預設值為第一預設值*第二預設值。