[發明專利]一種人機對話系統的測試方法及裝置

有效

• 申請號: 202011155117.9
• 申請日: 2020-10-26
• 公開（公告）號: CN112417109B
• 公開（公告）日: 2023-08-01
• 發明（設計）人: 張瀚;雷欣;李志飛
• 申請（專利權）人: 問問智能信息科技有限公司
• 主分類號: G06F16/332
• 分類號: G06F16/332;G06F16/33
• 代理公司: 北京樂知新創知識產權代理事務所(普通合伙) 11734
• 代理人: 王曌寅

1.一種人機對話系統的測試方法，其特征在于，包括：

將語音指令組至少2次輸入到標準系統中，以獲得標準返回結果；所述語音指令組中包括至少2個語音指令；

利用所述標準返回結果，確定所述語音指令組對應的關鍵信息組；

將所述語音指令組輸入到待測系統中，以獲得待測返回結果；

根據所述關鍵信息組和所述待測返回結果，確定所述待測系統的測試結果；

分別獲得各所述語音指令在各次輸入所述標準系統時，對應的單次標準值；

根據各所述單次標準值，確定所述標準返回結果；

將所述標準返回結果中，同一語音指令對應的各單次標準值，確定為所述語音指令對應的對照值組；

根據所述對照值組，確定所述語音指令對應的關鍵項；

根據各所述語音指令對應的關鍵項，確定所述關鍵信息組；

確定所述對照值組中各所述單次標準值的相同數據項，將所述相同數據項確定為所述語音指令對應的關鍵項。

2.根據權利要求1所述方法，其特征在于，所述將所述語音指令組輸入到待測系統中，以獲得待測返回結果包括：

分別獲得各所述語音指令在輸入所述待測系統時，對應的單次測試值；

根據各所述單次測試值，確定所述待測返回結果。

3.根據權利要求2所述方法，其特征在于，所述根據所述關鍵信息組和所述待測返回結果，確定所述待測系統的測試結果包括：

當任一所述語音指令對應的單次測試值中，不包括所述語音指令對應的關鍵項，則將所述待測系統的測試結果確定為不合格。

4.根據權利要求1~3任意一項所述方法，其特征在于，還包括：

當所述待測系統的測試結果為不合格，調整所述待測系統。

5.一種人機對話系統的測試裝置，其特征在于，包括：

標準返回結果確定模塊，用于將語音指令組至少2次輸入到標準系統中，以獲得標準返回結果；所述語音指令組中包括至少2個語音指令；

關鍵信息組確定模塊，用于利用所述標準返回結果，確定所述語音指令組對應的關鍵信息組；

待測返回結果確定模塊，用于將所述語音指令組輸入到待測系統中，以獲得待測返回結果；

測試結果確定模塊，用于根據所述關鍵信息組和所述待測返回結果，確定所述待測系統的測試結果；

所述標準返回結果確定模塊，還用于分別獲得各所述語音指令在各次輸入所述標準系統時，對應的單次標準值；根據各所述單次標準值，確定所述標準返回結果；

所述關鍵信息組確定模塊，還用于將所述標準返回結果中，同一語音指令對應的各單次標準值，確定為所述語音指令對應的對照值組；根據所述對照值組，確定所述語音指令對應的關鍵項；根據各所述語音指令對應的關鍵項，確定所述關鍵信息組；

確定所述對照值組中各所述單次標準值的相同數據項，將所述相同數據項確定為所述語音指令對應的關鍵項。

6.一種計算機可讀存儲介質，所述存儲介質存儲有計算機程序，所述計算機程序用于執行上述權利要求1~4任一項所述的人機對話系統的測試方法。

7.一種電子設備，包括：

處理器；

用于存儲所述處理器可執行指令的存儲器；

所述處理器，用于從所述存儲器中讀取所述可執行指令，并執行所述指令以實現上述權利要求1~4任一項所述的人機對話系統的測試方法。