[發明專利]用于A/B測試實驗的方法及裝置、電子設備和介質

在審

• 申請號: 202210505955.7
• 申請日: 2022-05-10
• 公開（公告）號: CN114942881A
• 公開（公告）日: 2022-08-26
• 發明（設計）人: 黃斐喬
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36;H04L47/70
• 代理公司: 北京市漢坤律師事務所 11602
• 代理人: 姜浩然;吳麗麗

本公開提供了一種用于A/B測試實驗的方法、裝置、電子設備、計算機可讀存儲介質和計算機程序產品，涉及計算機領域，尤其涉及數據存儲技術領域。實現方案為：確定用于A/B測試實驗的任意一個事件在進行流量分配時最多能分配的實驗個數；基于實驗個數確定事件的第一屬性的屬性值的字符串長度，第一屬性用于表示事件所分配實驗的實驗信息；基于實驗個數以及字符串長度，確定相應數量的哈希函數；以及響應于在流量分配時第一事件被分配到一個或多個實驗，基于相應數量的哈希函數，確定第一事件所對應的第一屬性的屬性值，以使得在測試數據分析時根據第一屬性的屬性值確定第一事件是否分配到目標實驗。

技術領域

本公開涉及計算機領域，尤其涉及數據存儲技術領域，具體涉及一種用于A/B測試實驗的方法、裝置、電子設備、計算機可讀存儲介質和計算機程序產品。

背景技術

A/B測試實驗，其基本原理是為網頁或App(應用程序)的界面或流程制作兩個(A/B)或多個(A/B/n)版本。在同一時間維度，分別讓屬性相同或相似的訪客群組隨機訪問這些版本，收集各群組的用戶體驗數據和業務數據，最后分析評估出最佳版本正式采用。在A/B測試實驗中，如何在滿足能夠靈活構建測試指標的前提下，用盡量少的存儲代價和盡量好的性能來篩選出匹配到某個實驗的事件成為關鍵。

發明內容

本公開提供了一種用于A/B測試實驗的方法、裝置、電子設備、計算機可讀存儲介質和計算機程序產品。

根據本公開的一方面，提供了一種用于A/B測試實驗的方法，包括：確定用于所述A/B測試實驗的任意一個事件在進行流量分配時最多能分配的實驗個數；基于所述實驗個數確定所述事件的第一屬性的屬性值所對應的位數組長度，其中所述第一屬性用于表示所述事件所分配實驗的實驗信息；基于所述實驗個數以及所述位數組長度，確定相應數量的哈希函數；以及響應于在流量分配時第一事件被分配到一個或多個實驗，基于所述相應數量的哈希函數，確定所述第一事件所對應的第一屬性的屬性值，以使得在測試數據分析時根據所述第一屬性的屬性值確定所述第一事件是否分配到目標實驗。

根據本公開的另一方面，提供了一種用于A/B測試實驗的裝置，包括：第一確定單元，配置為確定用于所述A/B測試實驗的任意一個事件在進行流量分配時最多能分配的實驗個數；第二確定單元，配置為基于所述實驗個數確定所述事件的第一屬性的屬性值所對應的位數組長度，其中所述第一屬性用于表示所述事件所分配實驗的實驗信息；第三確定單元，配置為基于所述實驗個數以及所述位數組長度，確定相應數量的哈希函數；以及第四確定單元，配置為響應于在流量分配時第一事件被分配到一個或多個實驗，基于所述相應數量的哈希函數，確定所述第一事件所對應的第一屬性的屬性值，以使得在測試數據分析時根據所述第一屬性的屬性值確定所述第一事件是否分配到目標實驗。

根據本公開的另一方面，提供了一種電子設備，包括：至少一個處理器；以及與至少一個處理器通信連接的存儲器；存儲器存儲有可被至少一個處理器執行的指令，該指令被至少一個處理器執行，以使至少一個處理器能夠執行本公開所述的方法。

根據本公開的另一方面，提供了一種存儲有計算機指令的非瞬時計算機可讀存儲介質，該計算機指令用于使計算機執行本公開所述的方法。

根據本公開的另一方面，提供了一種計算機程序產品，包括計算機程序，該計算機程序在被處理器執行時實現本公開所述的方法。

根據本公開的一個或多個實施例，在A/B測試實驗流量分配時，通過哈希函數確定每個事件中的用于表示所分配實驗信息的位數組形式的屬性值，從而在測試數據分析時可以根據該屬性值確定相關事件是否命中目標實驗，實現了以盡量少的存儲代價、盡量高的效率來篩選出匹配到某個實驗的事件。

應當理解，本部分所描述的內容并非旨在標識本公開的實施例的關鍵或重要特征，也不用于限制本公開的范圍。本公開的其它特征將通過以下的說明書而變得容易理解。

附圖說明