[發明專利]語音交互設備評級方法、系統、計算機設備和存儲介質

有效

• 申請號: 201810847969.0
• 申請日: 2018-07-27
• 公開（公告）號: CN108986786B
• 公開（公告）日: 2020-12-08
• 發明（設計）人: 徐鵬飛;徐華偉;黃林軼;黃登甲;劉嘉祁;陳玉明;彭琦;劉群興
• 申請（專利權）人: 中國電子產品可靠性與環境試驗研究所（（工業和信息化部電子第五研究所）（中國賽寶實驗室））
• 主分類號: G10L15/01
• 分類號: G10L15/01
• 代理公司: 廣州華進聯合專利商標代理有限公司 44224
• 代理人: 陳金普

1.一種語音交互設備評級方法，其特征在于，包括以下步驟：

獲取待測語音交互設備的設備功能信息；其中，所述設備功能信息包括陪伴聊天、文字錄入、信息查詢、身份識別；

根據待測語音交互設備的設備功能信息在語音交互測試題庫中獲取標準測試題集；其中，所述語音交互測試題庫包括用于測試待測語音交互設備的測試題；

根據所述標準測試題集對所述待測語音交互設備進行評測，并獲取評測值，根據所述評測值獲取所述待測語音交互設備的評測等級；其中，所述標準測試題集包括用于測試待測語音交互設備的設備功能的測試題，所述標準測試題集中的各個標準測試題是將所述語音交互測試題庫中邏輯錯誤或語義錯誤的無效測試題去除后的剩余測試題。

2.根據權利要求1所述的語音交互設備評級方法，其特征在于，所述根據待測語音交互設備的設備功能信息在語音交互測試題庫中獲取標準測試題集的步驟，包括以下步驟：

根據所述待測語音交互設備的設備功能信息在所述語音交互測試題庫中獲取有效測試題集，其中，所述有效測試題集包括用于對所述待測語音交互設備進行測試并獲取測試反饋信息的有效測試題；

在所述有效測試題集選取第一預設數量的有效測試題，并將所述第一預設數量的有效測試題組成所述標準測試題集。

3.根據權利要求2所述的語音交互設備評級方法，其特征在于，所述在所述有效測試題集選取第一預設數量的有效測試題，并將所述第一預設數量的有效測試題組成所述標準測試題集的步驟，包括以下步驟：

獲取所述有效測試題集的各個有效測試題的特征值；

按照各所述有效測試題的特征值對所有所述有效測試題進行分類，并生成多個聚類，其中，所述聚類包括特征值為同類的有效測試題；

在當前聚類中選取所述當前聚類對應的第二預設數量的有效測試題，并將所述第二預設數量的有效測試題作為所述當前聚類的聚類測試題集；

獲取各個聚類的聚類測試題集，并將所有所述聚類的聚類測試題集組成所述標準測試題集，其中，所有所述聚類對應的第二預設數量的總和等于所述第一預設數量。

4.根據權利要求3所述的語音交互設備評級方法，其特征在于，所述在當前聚類中選取第二預設數量的有效測試題，并將所述第二預設數量的有效測試題作為所述當前聚類的聚類測試題集的步驟，包括以下步驟：

獲取所述當前聚類中各個有效測試題的相似度因子；

在所述當前聚類中選取所述第二預設數量的有效測試題，并計算所述第二預設數量的有效測試題的相似度因子的和值；

在所述相似度因子的和值低于或等于預設值時，將所述第二預設數量的有效測試題組成所述聚類測試題集。

5.根據權利要求1所述的語音交互設備評級方法，其特征在于，所述根據所述評測值獲取所述待測語音交互設備的評測等級的步驟，包括以下步驟：

根據所述評測值和評分表，獲取所述評測值對應的等級，并將所述評測值對應的等級作為所述待測語音交互設備的評測等級。

6.根據權利要求1所述的語音交互設備評級方法，其特征在于，所述根據所述標準測試題集對所述待測語音交互設備進行評測，并獲取評測值的步驟，包括以下步驟：

向所述待測語音交互設備播放所述標準測試題集中各個標準測試題對應的測試語音，并一一對應接收所述待測語音交互設備對各所述測試語音的測試反饋信息；

根據各所述測試反饋信息對應的各所述標準測試題的參考信息進行對比，獲取各所述標準測試題的測試值；

將所有所述標準測試題的測試值的和值作為所述評測值。

7.根據權利要求1所述的語音交互設備評級方法，其特征在于，還包括以下步驟：

根據裝載有語音交互的設備的使用反饋和所述裝載有語音交互的設備的設備信息，組建所述語音交互測試題庫。