[發明專利]系統測試方法、設備及計算機可讀存儲介質

有效

• 申請號: 201810946965.8
• 申請日: 2018-08-20
• 公開（公告）號: CN109324956B
• 公開（公告）日: 2021-11-05
• 發明（設計）人: 孫芮;曾紀策;朱紅燕;莫林林
• 申請（專利權）人: 深圳前海微眾銀行股份有限公司
• 主分類號: G06F11/34
• 分類號: G06F11/34;G06F11/36
• 代理公司: 深圳市世紀恒程知識產權代理事務所 44287
• 代理人: 胡海國;魏蘭

本發明公開了一種系統測試方法、設備及計算機可讀存儲介質，該方法包括步驟：當獲取到待測試系統對應的第一測試集后，在與生產環境流量一致的測試環境中測試所述第一測試集，得到測試結果；當根據所述測試結果確定所述第一測試集通過測試后，在灰度環境中通過RMB獲取第二測試集，對所述第二測試集進行抽樣，以在所述第二測試集中提取到第三測試集；若所述第三測試集在所述灰度環境中通過測試，則確定所述待測試系統通過測試。本發明實現了通過在與生成環境的流量一致的測試環境中測試待測試系統，且通過灰度環境對接真實的生產數據進行測試待測試系統，提高了測試基于機器學習系統的準確率，以及降低了測試基于機器學習系統的測試難度。

技術領域

本發明涉及測試技術領域，尤其涉及一種系統測試方法、設備及計算機可讀存儲介質。

背景技術

目前，很多開發出來的系統在投入生產使用時，都需要經過測試。在測試系統過程中，存在以下幾個問題：①生產過程中的TPS(Transaction Per Second，每秒事務處理量)極高，如在生產環境中，交易量的TPS在2600以上，消息量的TPS在8500以上，而測試環境難以模擬生產環境的流量高并發的情況；②生產環境中機器資源充足，而測試環境中的機器資源較少，因此，當測試環境對應生產環境中的真實數據時，測試環境中的機器資源很快會達到瓶頸，即測試環境中的機器資源不足以支持數據流量大的情況。由于上述問題的存在，導致了對基于機器學習系統進行測試的難度大的問題。

發明內容

本發明的主要目的在于提供一種系統測試方法、設備及計算機可讀存儲介質，旨在解決現有的對基于機器學習的系統測試難度大的技術問題。

為實現上述目的，本發明提供一種系統測試方法，所述系統測試方法包括步驟：

當獲取到待測試系統對應的第一測試集后，在與生產環境流量一致的測試環境中測試所述第一測試集，得到測試結果；

當根據所述測試結果確定所述第一測試集通過測試后，在灰度環境中通過可信賴消息總線RMB獲取第二測試集，對所述第二測試集進行抽樣，以在所述第二測試集中提取到第三測試集；

若所述第三測試集在所述灰度環境中通過測試，則確定所述待測試系統通過測試。

優選地，所述當獲取到待測試系統對應的第一測試集后，在與生產環境流量一致的測試環境中測試所述第一測試集，得到測試結果的步驟包括：

當獲取到待測試系統對應的第一測試集后，調整測試環境中的線程并發數，并在調節所述線程并發數后檢測所述測試環境的每秒事務處理量TPS是否與生產環境的TPS一致；

若所述測試環境的TPS與所述生產環境的TPS一致，則在所述測試環境中測試所述第一測試集，得到測試結果。

優選地，所述當獲取到待測試系統對應的第一測試集后，調整測試環境中的線程并發數的步驟包括：

當獲取到待測試系統對應的第一測試集后，計算所述測試環境當前TPS與所述生產環境TPS之間的差值；

獲取所述差值與待調整線程數之間的映射關系；

基于所述映射關系，確定所述差值對應的待調整線程數；

根據所確定的所述待調整線程數調整所述測試環境中的線程并發數。

優選地，所述當根據所述測試結果確定所述第一測試集通過測試后，在灰度環境中通過可信賴消息總線RMB獲取第二測試集，對所述第二測試集進行抽樣，以在所述第二測試集中提取到第三測試集的步驟包括：

當根據所述測試結果確定所述第一測試集通過測試后，通過所述灰度環境中的所述RMB獲取第二測試集，并獲取所述第二測試集中各筆交易數據對應的流水號；

計算所述流水號的第一哈希值，將所述第一哈希值除以預設數值；