[發明專利]一種眾包測試自動化評估方法及裝置

有效

• 申請號: 202110104907.2
• 申請日: 2021-01-26
• 公開（公告）號: CN112988567B
• 公開（公告）日: 2022-02-15
• 發明（設計）人: 楊鵬;趙聚雪;曾哲軍;詹增榮
• 申請（專利權）人: 廣州番禺職業技術學院
• 主分類號: G06F11/36
• 分類號: G06F11/36
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 郭浩輝;顏希文

本發明公開了一種眾包測試自動化評估方法及裝置，自動化評估方法包括：將標準測試用例集中每個標準測試用例均轉化為第一關鍵詞集合，將待評估測試用例集中每個待評估測試用例均轉化為第二關鍵詞集合；獲取第一關鍵詞集合與第二關鍵詞集合的交集，根據交集將每個待評估測試用例映射到唯一對應的標準測試用例；獲取第一關鍵詞集合與對應的第二關鍵詞集合的并集，根據并集計算得到每個標準測試用例的得分；計算總得分的平均值，根據平均值對待評估測試用例集進行評估。本發明提供一種眾包測試自動化評估方法及裝置，以解決現有技術無法準確對眾包測試進行評估的技術問題，實現準確地對眾包測試自動化評估。

技術領域

本發明涉及軟件測試技術領域，尤其是涉及一種眾包測試自動化評估方法及裝置。

背景技術

在互聯網時代，各式各樣的軟件被開發出來，這些軟件無一例外在不同程度上有著缺陷，軟件測試的目的是盡可能的在系統上線之前發現這些缺陷，使其能夠及時修正從而減小缺陷造成的影響。在傳統的軟件測試中，少數的測試人員需要對一個軟件進行大量測試，這種測試耗費少數人大量的精力，耗時時間長，而且往往具有局限性。眾包測試是為了解決傳統軟件測試耗費時間長，消耗人力物力資源大，測試具有局限性的缺點而衍生出來的測試方法。眾包測試成本低廉，通過在眾包平臺上發布測試任務，用較低的報酬讓眾包平臺上的用戶參與到眾包測試任務中來，從而有效降低測試成本。在眾包平臺上的注冊用戶分布在世界各地，這些互聯網人員使用的上網設備、操作系統、編程語言各不相同，對于同一個測試任務，可以發現更多真實環境下軟件可能存在的問題，如兼容性問題。利用眾包測試收集反饋回來的信息，可以獲取到大量軟件可能存在的缺陷，進而有針對性的對其進行改進。但是眾包測試的低成本也導致了參與眾包測試的人員水平參差不齊，某些測試人員會為了快速獲得報酬而提交低質量的測試報告，導致測試任務收集到的測試信息質量差，難以用于有針對性地改善軟件質量。

本申請的發明人在研究中發現，現有技術通過人工手段對大量的測試用例進行評估，由于測試用例的數量較大且眾包測試的參與者可信度沒有具體的量化指標，導致無法準確對眾包測試進行評估。

發明內容

本發明提供一種眾包測試自動化評估方法及裝置，以解決現有技術通過人工手段無法準確對眾包測試中大量的測試用例進行評估的技術問題，從而實現準確地對眾包測試進行自動化評估。

本發明第一實施例提供了一種眾包測試自動化評估方法，包括：

將標準測試用例集中每個標準測試用例均轉化為第一關鍵詞集合，將待評估測試用例集中每個待評估測試用例均轉化為第二關鍵詞集合；

獲取每個所述標準測試用例對應的第一關鍵詞集合與每個待評估測試用例所述第二關鍵詞集合的交集，根據所述交集將每個所述待評估測試用例映射到唯一對應的所述標準測試用例；

獲取每個所述標準測試用例的第一關鍵詞集合與對應的所述待評估測試用例的第二關鍵詞集合的并集，根據所述并集計算得到每個所述標準測試用例的得分；

根據每個所述標準測試用例的得分計算所有所述標準測試用例的總得分，并計算所述總得分的平均值，根據所述平均值對所述待評估測試用例集進行評估。

進一步地，將標準測試用例集中每個標準測試用例均轉化為第一關鍵詞集合，將待評估測試用例集中每個待評估測試用例均轉化為第二關鍵詞集合，具體包括：

采用自然語言處理技術將所述標準測試用例集中每個標準測試用例均轉化為第一關鍵詞集合；采用自然語言處理技術將待評估測試用例集中每個待評估測試用例均轉化為第二關鍵詞集合。

進一步地，所述根據所述交集將每個所述待評估測試用例映射到唯一對應的所述標準測試用例，具體包括：

獲取每個所述第一關鍵詞集合與每個所述第二關鍵詞集合的最大交集，將所述最大交集對應的待評估測試用例映射到唯一對應的標準測試用例。