[發明專利]測試方法、裝置、電子設備及計算機可讀存儲介質

在審

• 申請號: 202110795503.2
• 申請日: 2021-07-14
• 公開（公告）號: CN113485931A
• 公開（公告）日: 2021-10-08
• 發明（設計）人: 陳友洋
• 申請（專利權）人: 廣州虎牙科技有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 張欣欣

1.一種測試方法，其特征在于，所述方法包括：

當目標應用存在優化需求，根據優化策略，確定所述目標應用對應的實驗版本和對照版本；其中，所述實驗版本配置有所述優化策略；所述對照版本沒有配置有所述優化策略；

獲取所述實驗版本對應的實驗組用戶行為數據集和所述對照版本對應的對照組用戶行為數據集；

基于與目標數據指標相關的參考指標，分別對所述實驗組用戶行為數據集、所述對照組用戶行為數據集進行分組；所述參考指標與所述目標數據指標具有最大相關度；其中，所述目標數據指標用于評估所述優化策略的優化性能；

基于分組后的所述實驗組用戶行為數據集和分組后的所述對照組用戶行為數據集進行統計分析；

若所述實驗版本對應的所述目標數據指標優于所述對照版本對應的所述目標數據指標，則將所述實驗版本確定為所述目標應用的目標版本。

2.根據權利要求1所述的測試方法，其特征在于，基于與所述目標數據指標的參考指標，對所述實驗組用戶行為數據集、所述對照組用戶行為數據集進行分組的步驟，包括：

基于所述參考指標，分別確定所述實驗組用戶行為數據集對應的第一分組個數以及所述對照組用戶行為數據集對應的第二分組個數；

按照所述第一分組個數，將所述實驗組用戶行為數據集進行分組；

按照所述第二分組個數，將所述對照組用戶行為數據進行分組。

3.根據權利要求1所述的測試方法，其特征在于，在獲得實驗組用戶行為數據集、對照組用戶行為數據集的步驟之后，所述方法還包括：

基于預設的相關性算法，確定與所述目標數據指標之間具有最大相關度的所述參考指標。

4.根據權利要求2所述的測試方法，其特征在于，按照所述第一分組個數，將所述實驗組用戶行為數據集進行分組，包括：

按照所述第一分組個數，將將所述實驗組用戶行為數據集分成與所述第一分組個數一致的多個實驗組；每個所述實驗組對應有一個所述參考指標的指標值；

根據實驗組用戶行為數據集的數據總量以及劃分成的每一個實驗組的數據個數來計算每個實驗組對應的權重；

按照所述第二分組個數，將所述對照組用戶行為數據集進行分組,包括：

按照所述第二分組個數，將所述對照組用戶行為數據集劃分成與所述第二分組個數一致的多個對照組；每個所述對照組對應有一個所述參考指標的指標值；

根據對照組用戶行為數據集的數據總量以及劃分成的每一個對照組的數據個數來計算每個對照組對應的權重。

5.一種測試裝置，其特征在于，包括：

確定模塊，用于當目標應用存在優化需求，根據優化策略，確定所述目標應用對應的實驗版本和對照版本；其中，所述實驗版本配置有所述優化策略；所述對照版本沒有配置有所述優化策略；

獲取模塊，用于獲取所述實驗版本對應的實驗組用戶行為數據集和所述對照版本對應的對照組用戶行為數據集；

分組模塊，用于基于與目標數據指標相關的參考指標，分別對所述實驗組用戶行為數據集、所述對照組用戶行為數據集進行分組；所述參考指標與所述目標數據指標具有最大相關度；其中，所述目標數據指標用于評估所述優化策略的優化性能；

測試模塊，用于基于分組后的所述實驗組用戶行為數據集和分組后的所述對照組用戶行為數據集進行統計分析；

所述確定模塊，用于若所述實驗版本對應的所述目標數據指標優于所述對照版本對應的所述目標數據指標，則將所述實驗版本確定為所述目標應用的目標版本。

6.根據權利要求5所述的測試裝置，其特征在于，所述分組模塊，具體用于：

基于所述參考指標，分別確定所述實驗組用戶行為數據集對應的第一分組個數以及所述對照組用戶行為數據集對應的第二分組個數；

按照所述第一分組個數，將所述實驗組用戶行為數據集進行分組；

按照所述第二分組個數，將所述對照組用戶行為數據進行分組。

7.根據權利要求5所述的測試裝置，其特征在于，還包括：確定模塊，用于：

基于預設的相關性算法，確定與所述目標數據指標之間具有最大相關度的所述參考指標。