[發明專利]分桶測試方法和提供配置信息的方法、裝置及系統

有效

• 申請號: 201410746167.2
• 申請日: 2014-12-08
• 公開（公告）號: CN105740137B
• 公開（公告）日: 2018-07-31
• 發明（設計）人: 劉曉明;沈賁寅
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36
• 代理公司: 北京市清華源律師事務所 11441
• 代理人: 沈泳;李贊堅

本申請公開了一種用于客戶端應用程序的分桶測試方法和裝置，一種用于提供分桶測試配置信息的方法和裝置，以及一種分桶測試系統。其中用于客戶端應用程序的分桶測試方法包括：獲取服務端提供的對應于客戶端應用程序版本的分桶測試配置信息；根據客戶端應用程序代碼涉及的分桶測試的功能類別，從分桶測試配置信息中獲取對應的功能版本標識；根據功能版本標識執行對應的代碼片段。采用本申請提供的技術方案，不僅可以滿足基于C/S架構的分桶測試的版本隔離要求，而且便于服務端對不同版本客戶端應用程序的分桶測試進行靈活管理與控制，特別是在分桶測試結束后，可以通過對配置信息的調整，控制客戶端應用程序自動切換到正式版本，改善用戶的使用體驗。

技術領域

本申請涉及分桶測試領域，具體涉及一種用于客戶端應用程序的分桶測試方法。本申請同時提供一種用于客戶端應用程序的分桶測試裝置、一種用于提供分桶測試配置信息的方法和裝置、以及一種分桶測試系統。

背景技術

A/B測試(A/B Test)，通常是指對某一個特定的頁面或者頁面上的一部分，制作兩個或兩個以上版本，然后將網站的訪問流量分發到不同的版本上，繼而觀察網站該頁面或者該部分帶來的轉化率，或者一些重要指標的變化，從而得出其中的一個版本比另一個版本更好的結論，并以此決定最終上線的版本。

分桶測試(Bucket Test，也稱Split Test)則是A/B Test概念的擴展，通常是指針對某個應用版本的某個待測試功能類別(也稱為功能點或者功能key)，例如：網頁顯示的按鈕顏色，同時執行多個A/B Test，即：不是只有一個待測試版本B，而是B1、B2......多個待測試版本(通常也稱為與功能類別對應的功能版本)，通過做一次分桶測試就可以在多個功能版本中選出一個最優的版本。

上述A/B測試或者分桶測試技術，最初都是為網站而設計的，由于網站通常采用B/S架構(瀏覽器/服務器架構)，具有實時發布版本不敏感的特性，只要服務端進行升級，所有客戶端訪問的功能都是最新的。然而對于基于C/S架構(客戶端/服務器架構)的無線客戶端應用程序(簡稱APP)來說，由于客戶端用戶可以根據自己的意愿決定是否升級或者下載最新版本的客戶端應用程序，導致了多個APP應用版本并存的狀況，這就要求無線客戶端APP的分桶測試需要具備版本隔離的特性，保證各個應用版本之間的分桶測試不會相互干擾，因此傳統的分桶測試方式對無線客戶端APP而言并不適合。

現有技術對于上述無線客戶端APP的分桶測試通常采用Beta發布方式，即：針對分桶測試的特定功能點，提供不同功能版本的安裝包(非正式發布版本的安裝包)，并篩選活躍且愿意嘗新的用戶在其客戶端設備上安裝上述安裝包，對各個功能版本進行小范圍測試，并根據測試結果來評估多個功能版本的優劣，確定最終上線發布的功能版本。

采用上述在有限的客戶群體中安裝固定安裝包的Beta發布方式，服務端無法對分桶測試過程進行必要的控制與管理，而且在分桶測試結束后，參與分桶測試的用戶只能通過重新下載的方式，才能使用正式發布版本的客戶端應用程序，影響用戶的使用體驗。

發明內容

本申請提供的用于客戶端應用程序的分桶測試方法和用于提供分桶測試配置信息的方法相互配合，針對客戶端應用程序的分桶測試，提出了一種新的技術方案，在滿足版本隔離要求的同時，便于服務端對客戶端應用程序的分桶測試過程進行控制與管理。本申請另外提供相應的用于客戶端應用程序的分桶測試裝置和用于提供分桶測試配置信息的裝置，以及一種分桶測試系統。

本申請提供一種用于客戶端應用程序的分桶測試方法，包括：

獲取服務端提供的對應于所述客戶端應用程序版本的分桶測試配置信息；

根據所述客戶端應用程序代碼涉及的分桶測試的功能類別，從所述分桶測試配置信息中獲取對應的功能版本標識；

根據所述功能版本標識執行對應的代碼片段。