[發明專利]用于資源型數據的數據增量測試方法及系統

有效

• 申請號: 202011502148.7
• 申請日: 2020-12-18
• 公開（公告）號: CN112486844B
• 公開（公告）日: 2022-07-08
• 發明（設計）人: 王建忠;徐華;張瑜
• 申請（專利權）人: 思必馳科技股份有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36;G06F40/30
• 代理公司: 北京商專永信知識產權代理事務所(普通合伙) 11400
• 代理人: 黃謙;車江華

本發明實施例提供一種用于資源型數據的數據增量測試方法。該方法包括：通過詞庫功能模板對增量詞條數據擴充，生成增量詞條測試用例，以及增量詞條測試用例對應的預期語義解析結果；利用增量詞條數據更新后的語義理解服務解析增量詞條測試用例，確定實際語義解析結果；基于自動化的語義結果對比工具對預期語義解析結果以及實際語義解析結果評估，確定增量詞條數據中的錯誤詞條，在增量詞條數據中過濾錯誤詞條，確定更新后的語義理解服務的功能性。本發明實施例還提供一種用于資源型數據的數據增量測試系統。本發明實施例通過擴大模板的數量可以擴大測試用例的數量，從而提高測試強度。

技術領域

本發明涉及智能語音領域，尤其涉及一種用于資源型數據的數據增量測試方法及系統。

背景技術

語義理解中用到的資源型數據，包括歌曲名/歌手名/影視名稱/故事名稱等詞庫資源，需要做定期的更新適配新出的歌曲/電影，來提高語義理解準確率和提升用戶體驗。目前這些廠商在更新這些詞庫數據的時候測試方案比較欠缺，只能保證源頭數據質量，或者通過單一的功能說法人工檢查的方式進行。

在實現本發明過程中，發明人發現相關技術中至少存在如下問題：

將詞條數據新增到資源中，并通過功能說法測試語義理解的結果，人工檢查結果詞條是否生效。這樣操作往往測試強度不夠：較少的功能說法不能保證新增詞條適用于已有的大部分功能。測試范圍不夠：沒有評估新增詞條對其他領域的影響。效率低：人工檢查詞條是否生效效率低，無法做到大批量數據的更新，也很難做高頻的更新操作。

發明內容

為了至少解決現有技術中針對這些新增的資源型數據沒有全面的測試方案，對于測試結果沒有自動化的評估方案，和自動化的錯誤詞條排除的問題。

第一方面，本發明實施例提供一種用于資源型數據的數據增量測試方法，包括：

通過詞庫功能模板對增量詞條數據擴充，生成增量詞條測試用例，以及所述增量詞條測試用例對應的預期語義解析結果；

利用所述增量詞條數據更新后的語義理解服務解析所述增量詞條測試用例，確定實際語義解析結果；

基于自動化的語義結果對比工具對所述預期語義解析結果以及所述實際語義解析結果評估，確定所述增量詞條數據中的錯誤詞條，在所述增量詞條數據中過濾所述錯誤詞條，確定所述更新后的語義理解服務的功能性。

第二方面，本發明實施例提供一種用于資源型數據的數據增量測試系統，包括：

數據擴充程序模塊，用于通過詞庫功能模板對增量詞條數據擴充，生成增量詞條測試用例，以及所述增量詞條測試用例對應的預期語義解析結果；

語義解析結果確定程序模塊，用于利用所述增量詞條數據更新后的語義理解服務解析所述增量詞條測試用例，確定實際語義解析結果；

增量測試程序模塊，用于基于自動化的語義結果對比工具對所述預期語義解析結果以及所述實際語義解析結果評估，確定所述增量詞條數據中的錯誤詞條，在所述增量詞條數據中過濾所述錯誤詞條，確定所述更新后的語義理解服務的功能性。

第三方面，提供一種電子設備，其包括：至少一個處理器，以及與所述至少一個處理器通信連接的存儲器，其中，所述存儲器存儲有可被所述至少一個處理器執行的指令，所述指令被所述至少一個處理器執行，以使所述至少一個處理器能夠執行本發明任一實施例的用于資源型數據的數據增量測試方法的步驟。

第四方面，本發明實施例提供一種存儲介質，其上存儲有計算機程序，其特征在于，該程序被處理器執行時實現本發明任一實施例的用于資源型數據的數據增量測試方法的步驟。